Анализ данных: Data Science

и Data EngineeringErmakov Petr @ HeadHunter

GeekWeekConf 2015 @ 22.11.2015 http://bit.ly/data_gwc2015

О себе• HeadHunter, Старший разработчик

• МГТУ им Баумана, Лектор

• https://ru.linkedin.com/in/ermakovpetr

• https://www.facebook.com/ermakovpetr

План на лекцию

• Услышим много buzzword’ов

• Увидим кучу разных графиков

• Узнаем как обстоят дела с работой для data scientist’ов

Апрель 2013 года, delphianalytics.net

Кто такие data scientist’ы?

https://twitter.com/josh_wills/status/198093512149958656

Кто такие data scientist’ы?

http://drewconway.com/zia/2013/3/26/the-data-science-venn-diagram

Кто такие data scientist’ы?

http://www.scoop.it/t/what-i-really-do/p/4021709708/2014/05/21/data-scientist

Сколько нужно data scientist’ов?

Сколько нужно data scientist’ов?

Сколько нужно data scientist’ов?

Сколько нужно data scientist’ов?

http://xkcd.ru/605/

На чем пишут data scientist’ы?

Какие инструменты используют data scientist’ы?

Сколько зарабатывают data scientist’ы?

Как стать data scientist’ом?

http://nirvacana.com/thoughts/becoming-a-data-scientist/

Где готовят data scientist’ов?

• МФТИ

• ВШЭ

• МГУ

Очные курсы• Бесплатные

• ШАД: https://yandexdataschool.ru

• ПЗАД: http://www.machinelearning.ru/wiki/index.php?title=Спецкурс_«Прикладные_задачи_анализа_данных»

• Платные

• New Professions Lab: http://newprolab.com/bigdata/

• Школа данных “Билайн”: http://bigdata.beeline.digital

• MLClass: http://dscourse.mlclass.ru

MOOC• Mining Massive Datasets https://www.coursera.org/course/

mmds

• Practical Machine Learning https://www.coursera.org/course/predmachlearn

• Data Analysis and Statistical Inference https://www.coursera.org/course/statistics

• Core Concepts in Data Analysis https://www.coursera.org/course/datan

• Statistics: Making Sense of Data https://www.coursera.org/course/introstats

MOOC• Introduction to Data Science https://www.coursera.org/course/

datasci

• Natural Language Processing https://www.coursera.org/course/nlangp

• Neural Networks for Machine Learning https://www.coursera.org/course/neuralnets

• Machine Learning https://www.coursera.org/course/machlearning

• Machine Learning https://www.coursera.org/learn/machine-learning

Meetups

• http://www.meetup.com/Moscow-Data-Science/

• http://www.meetup.com/Moscow-Data-Fest/

• http://www.meetup.com/Moscow-Independent-Data-Science-Meetup/

• https://www.facebook.com/groups/1413405125598651/

• https://www.facebook.com/groups/1505369016451458/

Data Engineer

http://blog.udacity.com/2014/12/data-analyst-vs-data-scientist-vs-data-engineer.html

Data Engineer

Анализ данных кликом мыши

• Excel

• SAS

• SPSS

• Azure ML

Демонстрация

HeadHunter• HeadHunter – это интернет-компания

• … а не рекрутер

• Высокие нагрузки:

• ~2k rps

• 1 минута простоя затронет 30k пользователей

Карьерные возможности HeadHunter

• Java: Hibernate, Spring, Guice, Jersey

• http://hh.ru/vacancy/14729102

• Frontend: HTML, JS, CSS, XSL

• http://hh.ru/vacancy/13987888

• IOS

• http://hh.ru/vacancy/14309333

• Data Scientist: Python, Machine Learning

• http://hh.ru/vacancy/14310288

• Автоматизация тестирования: Java, Selenium:

• http://hh.ru/vacancy/14309756

• Системный администратор Linux

• http://hh.ru/vacancy/13886018

• Свежие вакансии: http://hh.ru/employer/1455

Школа программистов HeadHunter

• http://school.hh.ru

• Java, Python, SQL, Networking, Frontend, Git, …

• заканчивается 6 набор

• Набор каждую осень, подписывайтесь на сайте

Спасибо за вниманиеДо новых встреч

http://bit.ly/data_gwc2015