Не вдаваясь сильно в математику, ведущий аналитик OZON.ru расскажет про различные виды рекомендаций, которые предоставляет маркетплейс своим пользователям: связанные товары, аксессуары, бандлы, персональные рекомендации, рекомендуемые категории товаров по запросам, рекомендуемые поисковые запросы, рекомендации в корзине. Кроме того, из доклада вы узнаете о стеке технологий, который использует команда, и ближайших планах.

1. © OZON.ru 1
Рекомендации

2. © OZON.ru 2
• Компании OZON.ru 19 лет
• Ассортимент 4,3 млн товаров
• 12 категорий, среди которых аптека, +18, продукты
• За 2016 год 5,8 млн заказов

3. © OZON.ru 3
План презентации
• Какими данными оперируем
• Стек технологий
• Рекомендации в поиске
• Персональные рекомендации
• Рекомендации на карточке товара

4. © OZON.ru 4
• Логи (~2 гб за один день)
• Описание товаров (~8,5 млн)
• Заказы
• Дерево каталогов
• Доступность товаров (~4 млн доступных)
• Ручные правила совместимости (>7,5 к пар тип-тип)
Какие данные собираем у себя

5. © OZON.ru 5
Стек технологий
Программный
• Большая часть разработки ведется на python, очень редко – java
• Фреймворк для распределенных вычислений – Apache Spark
• Доступ к данным происходит через Hive, реже через обычный SQL
Аппаратный
• Вычислительный кластер Ozon для задач среднего объема данных (<200 Гб)
• Инфраструктура Amazon Web Services для больших объемов данных

6. © OZON.ru 6
Поиск Главная Карточка товара

7. © OZON.ru 7
Рекомендации в поиске
• Рекомендуем товары по поисковому запросу (sb)
• Рекомендуем каталоги (sc)
• Рекомендуем другие поисковые запросы (ss)

8. © OZON.ru 8
Поисковой запрос не всегда
соответствует какому-либо слову из
названия/описания товара, поэтому
нельзя полностью включить товары
с полки в поисковую выдачу.
Пример: Краби – популярная у
путешественников провинция на юге
Таиланда. Книг с таким названием в
OZON.ru нет, зато есть книги про
южный Таиланд, что скорее всего
подойдет клиентам.
Искавшие покупают (sb)
Поисковая выдача по запросу «Краби»
Рекомендации по запросу «Краби»

9. © OZON.ru 9
Алгоритм расчета sb
Поиск
Собираем логи (инкрементально)
Парсим лог и рассчитываем основные
агрегаты (инкрементально)
Объединяем агрегаты согласно схеме
(всё, т.к. недолго)
Кладем в сервис для показа на сайте
Для увеличения покрытия поисковых запросов рекомендациями и улучшения качества самих
рекомендаций предприняты следующие действия: обработка поисковых запросов (токенизация,
лемматизация); переход от расчетов только SB к расширенной схеме; объединение товаров по
моделям
Поиск
Каталог
Товары
Товары
Товары

10. © OZON.ru 10
Персональные рекомендации
• Отображаются на главной странице сайта, используются для
рассылки в e-mail
• Рассчитываются для всех зарегистрированных клиентов, которые
совершили хотя бы одно действие «положить товар в корзину»
• Алгоритм расчета: implicit ALS
Собираем логи (инкрементально) Парсим лог и рассчитываем
основные агрегаты (инкрементально)
Формируем матрицу U-M
(устаревание + агрегация)
Обучаем модель ALSПрименяем модель (считаем топ
лучших моделей для клиента)
Переходим от моделей к товарам и
фильтруем
Для увеличения качества рекомендаций статистика для клиента собирается по longCookie

11. © OZON.ru 11
Рекомендации на карточке товара
Бандлы Аксессуары (сопутствующие товары)
Связанные товары

12. © OZON.ru 12
Бандлы
Бандлы могут подбираться экспертно и статистически.
Стастистические строятся на основе частоты совместных заказов.
Тройки подбираются из пар, для каждой пары ищем общий третий товар как пару к
каждому из товаров. Например, если для пары товаров А и В существует товар С,
который покупается и с товаром А и с товаром В, то образуется тройка АВС

13. © OZON.ru 13
Аксессуары (сопутствующие товары)
Ручная полка, генерируется на основе ручных связок типов и фильтров
(ограничений), которые должны быть применены к этим связкам.
Связка тип-тип:
Ноутбук – Сумка для ноутбука
Ограничение на связку тип-тип:
Диагональ экрана <= размер сумки
Р
Р
Соответствие тип – товар,
товарные характеристики
Входные данные
Переход от пары тип-тип к товар-
товар (декартово произведение)
Проверяем каждую пару товар-
товар на удовлетворение правилу
Накладываем на финальные пары
товар-товар статистику и берем топ
Алгоритм расчета Особенности: в среднем в
каждом типе 5к товаров,
таким образом одна связка
тип-тип порождает 25 млн
пар товар-товар.
Поэтому расчет
инкрементальный.

14. © OZON.ru 14
Связанные товары (Рекомендуем также)
• В данной полке показываются как товары заменители, так и дополнители
• Покрытие полкой более 98% товаров
• Примерно каждый 10й товар добавленный в корзину был найден клиентом
OZON.ru именно в этой полке
• Строится как комбинация алгоритмов, основанных на:
1. заказах (товары в одном заказе, товары заказанные одним клиентом)
2. логах (статистика совместных просмотров и т.п.)
3. контенте (товарные характеристики)

15. © OZON.ru 15
Но нам есть куда расти!

16. © OZON.ru 16
Спасибо!