Универсальная платформа для

рекомендаций Mail.ru Group

Алексей Воропаев, руководитель группы рекомендательных систем

«Парадоксальным образом изобилие

ассортимента товаров и услуг

ограничивает свободу нашего

выбора.»

Информации становится слишком много

Многие уже научились на этом зарабатывать

75% от 6.78ММ $

35% от 107ММ $

Зачем нам это?

51 М/мес

62 М/день

52 М/день

18 М/день

15 М/мес

3 М/мес

19 М/мес

11 М/мес

176 М установок

* число пользователей

Немного про данные

5 TB/сутки

+

100 GB/сутки

500 GB/сутки

Схема работы сервиса

Машинное

обучение Модели Сервис

рекомендаций

Контекст

Offline Online

• Коллабаративная фильтрация

• Контентные рекомендации

• На основе свойств объектов

• На основе сообществ людей

• Гибридные системы

Основные подходы к рекомендациям

Recommender Systems Handbook

Коллабаративная фильтрация

Матричное разложение

4.5 2

4 3.5

5 2

3.5 4 1

1.5 1.2 1.0 0.8

1.7 0.6 1.1 0.4

1.2 0.8

1.4 0.9

1.5 1.0

1.2 0.8

Ratings Users Items

≈ *

Персональные ленты

http://go.mail.ru/ Amigo Android

Граф запрос-документ

Запрос 1

Запрос 2

Док. 1

Док. 2

Док. 3

Рекомендации видео VK

docs

keyw

ord

s

wo

rd2vec

Контентные рекомендации

National Geographic gallery

• На основе поиска

• Deep learning

Рекомендации на основе изображений

Гибридные модели

Модель 1

Модель 2

Модель N

Агрегирующая

модель рекомендации

обратная связь

...

Холодный

старт

Hadoop

18 PB HDD

40 TB RAM

HDFS

YARN

HB

ase Spark Mapreduce

Spark

HDFS

HDFS

HDFS HDFS

HDFS

Job 1 Job 2

Job 1 Job 2

A/B тесты

Спасибо за внимание http://go.mail.ru