Полностью честно эффективность сервиса рекомендаций можно оценить только с помощью A/B теста. А/В тест должен измерять отдачу на инвестиции, а если это невозможно - то ценность посетителя.

1. Николай Михайловский, директор по
продуктам
Как измерять и сравнивать эффективность
сервисов персонализации

4. на главной странице сайта

5. КАК ИЗМЕРИТЬ ЭФФЕКТ
ТОВАРНЫХ РЕКОМЕНДАЦИЙ?

6. Как измерять?
• На глазок
• Биллинг
• A/B/… тест

7. Что измерять?
• CTR
• Конверсия
Vanity metrics
• Средний чек
___________________________________________________
• Ценность посетителя
• ROI (возврат на инвестиции)

8. Ценность посетителя
• = Оборот / Число посетителей
(по сегменту)
iPhone 5S Puro RunningBand
24 990 р.
1 190 р.

9. ROI
• ROI =
(Дополнительная прибыль – Стоимость
сервиса) / Стоимость сервиса

10. КАК ПРАВИЛЬНО?

11. A/A/B тест
Хорошая попытка, хотя и…

12. Сопоставим еще с данными 1C
Выполненные заказы
% кол-ва от
своих
% суммы от
своих
Crossss 41,0% 36,3%
RRocket 40,8% 38,2%
Исходный 41,6% 37,4%

13. Если одинаковы основные
метрики, обратимся к побочным

14. Следующий шаг – А/B тест эффективности
рассылки

17. Украина г. Харьков ул. Клочковская, 192а
+38 (067) 185-52-88
sales@crossss.com.ua