Борис Шминке — Распределённое ML на больших данных: опыт построения рекомендательной системы в ivi

Пост о том, какой была первая версия рекомендательной системы ivi в 2014 году, всё ещё легко можно найти на Хабре. В этом докладе мы решили рассказать о том, как из небольшого скрипта, перемножавшего матрицы, мы прошли путь до собственного Hadoop Data Lake, распределённого машинного обучения на Spark, фреймворка оффлайн-оценок на Scala и, в результате, высококастомизированной под нужды бизнеса рекомендательной системы.