24 hours of pass 2014 - data mining na cloud com o windows azure machine learning

Data Mining na Cloud com o Windows Azure Machine LearningRui Quintino, DevScope

2

Data Mining na Cloud com o Azure Machine LearningRui Quintino

Arquitecto p/ Data Intelligence @ DevScope

Blog & Twitterhttp://rquintino.wordpress.com http://twitter.com/rquintino

2

http://rquintino.wordpress.com/

http://twitter.com/rquintino

3

Agenda

Machine Learning & Data MiningPorquê? Cenários Utilização

Machine Learning com Azure MLAzure ML, Azure ML Studio, Experiências, Avaliação, Modelos de ML

RecursosBlogs, Samples, Cursos OnLine

Q&A

3

Data Mining & Machine Learning -Porquê Agora? … Novamente…?

4

• Base Teórica• Tecnologia• Dados (“big data”)• Necessidade (escala)• Oportunidade (complexidade)

Big Data, Data Science, Data Mining – ngram trends

5

Cenários Utilização- DM & ML

6

• Sistemas de recomendação (ex: Basket Analysis)• Classificação automática (ex: SPAM, crédito, documentos) • Previsão e forecast• Análise Texto (ex: “Sentiment Analysis”)• Inteligência Artificial (ex: OCR, ICR, Face recognition…)• Fraude

7

http://www.forbes.com/sites/kashmirhill/2012/02/16/how-target-figured-out-a-teen-girl-was-pregnant-before-her-father-did/

http://www.fastcolabs.com/3028414/how-facebooks-machines-got-so-good-at-recognizing-your-face

http://www.fastcodesign.com/1671893/the-secret-sauce-behind-netflixs-hit-house-of-cards-big-data

Classificação

• •

Regressão

• •

Segmentação

• •

Exemplos Cenários Data Mining & Machine Learning

8

Azure ML (Machine Learning)?

9

• Machine Learning na Cloud-Windows Azure• Experimentação & Descoberta – ML Studio• Diversos Algoritmos ML disponiveis• Disponibilização como Web Services/MarketPlace• Integração: R, Vowpal Wabbit• +Algoritmos MS Research, Bing, XBOX

Data Mining – Azure ML

10

https://github.com/Azure/azure-content/blob/master/articles/machine-learning-overview-of-azure-ml-process.md

• Exploração de Dados• Experimentação e Modelos• Web Services

Azure ML – Test Drive!

11

Azure ML – Recursos

12

https://www.youtube.com/user/DataScienceDojo

13

http://azure.microsoft.com/en-us/documentation/articles/machine-learning-faq/

http://azure.microsoft.com/en-us/documentation/services/machine-learning/models/