Конференция завершена. Ждем вас на HighLoad++ в следующий раз!

Как мы строили и развивали инфраструктуру вокруг задачи прогнозирования спроса

BigData и машинное обучение

Миграции данных
Python
Scala
Оптимизация производительности
Распределенные системы
Архитектура данных, потоки данных, версионирование
Алгоритмы и их сравнение
Проектирование информационных систем
Hadoop
Machine Learning
ETL
Agile / Scrum
Оптимизация
ML
Хранилища
Обработка данных
Железо
Инфраструктура

Доклад отклонён

Целевая аудитория

Датасаентисты, Инженеры и Аналитики любой тех отрасли

Тезисы

На базе работающей задачи прогнозирования поговорим об эволюции инфрастрктуры в рамках Компании Магнит.
Расскажем про миграцию вычислений и построения DataLake на базе Hadoop под задачу с большими данными, расскажем о транспорте и механизмах оркестрации задач и данных.
Поговорим о том как мы повышали производительность инженерных и распределенновычислительных задач в рамках достижения SLA расчета. Коснемся темы того, как мы переходим от классического ML к глубокому обучению, используя кластера GPU

Team Lead DS

Магнит

Занимаемся развитием BigData в одном из крупнейших ритейлеров СНГ

Видео

Другие доклады секции

BigData и машинное обучение