Календарь событий

Скачать как файл iCal
Мансарда Rambler&Co: Apache Spark
Четверг 27 Апрель 2017, 18:30 - 21:00
Хиты : 238
от Адрес электронной почты защищен от спам-ботов. Для просмотра адреса в вашем браузере должен быть включен Javascript.


27 апреля на Мансарде Rambler&Co пройдет первый митап, посвященный работе с Apache Spark.



Apache Spark уже успел зарекомендовать себя как один из основных фреймворков работы с большими данными и успешно применяется в таких крупных компаниях, как Amazon, Baidu, IBM, Databricks, NASA JPL и TripAdvisor. Нам известно, что и в России Spark используется во многих небольших и в некоторых крупных компаниях, причем весьма результативно.



В Rambler&Co мы уже около года используем Spark почти для всех задач департамента рекламных технологий, связанных с ETL и машинным обучением. Более того, в начале года мы успешно обновились до версии 2.1.0.



На митапе мы бы хотели поделиться нашим опытом внедрения Spark в продакшен, рассказать о проблемах, с которыми мы столкнулись, и обсудить решения, которые применили. Выяснить, какие новые и крутые фишки появились в Spark 2, и какие баги успешно мигрировали из предыдущих версий☺ Ну и, конечно же, познакомиться с другими энтузиастами и практиками этого замечательного инструмента и сделать наше мероприятие регулярным! Приходите, будет интересно!



Темы докладов:

Павел Клеменков (руководитель отдела машинного обучения)
Пайплайн машинного обучения на Apache Spark
Что у нас было до Spark, как мы к нему пришли, и при чем здесь математики-программисты?
Константин Колоколов (математик-программист) и Владимир Штанько (математик-программист)
Как правильно программировать на PySpark?
Краткое введение в архитектуру фреймворка. Что может пойти не так, куда смотреть и как бороться? Как не выстрелить себе в ногу?
Дмитрий Носов (математик-программист)
Criteo 1TB benchmark
Тестируем Vowpal Wabbit, XGBoost и Spark ML на датасете Criteo
Шорин Александр (инженер-разработчик devops)
Минуты из жизни со Spark
Как у нас живет Spark, как мы с ним живем, истории эксплуатации, поддержки, борьбы с подводными граблями.



Сбор гостей в 18.30.

Начало первого доклада в 19.00.

Место проведения – Мансарда Rambler&Co, которая расположена по адресу ул. Варшавское шоссе д.9 стр.1
https://rambler-co-e-org.timepad.ru/event/470664/
Место Ул. Варшавское шоссе д.9 стр.1.

Недостаточно прав для комментирования