11. Роботы бывают
• «Официальные» (паучки, grabber`ы
checker`ы, etc.)
• Не особо скрывающиеся (UserAgent -
стандартная библиотека)
• Желающие казаться людьми
–Становятся умнее
12. Зачем существуют роботы?
• Регулярное выдирание
информации со страницы
• Регулярный обход сайта
• Разовый, но очень мощный обход
• Накручивание статистики
• Да кто их разберёт!
14. Как отсеивать роботов?
• Пробовали писать правила.
• Просто разглядывали: постоянный
роботный шум, набеги роботов.
–Закономерность есть всегда.
• Генерировали новые правила.
• Правил становилось больше,
беспокойство нарастало.
16. Как наловить роботов и людей?
(подготовить обучающую выборку)
Экспертные выборки:
•Дорого делать репрезентативные
– Объём экспоненциально зависит от количества
факторов (у нас ~350)
•Субъективны
•Дорого поддерживать актуальными
24. Offline конверсии
Несколько телефонных номеров – единственный
эффективный способ разделить источники
трафика.
Целевой Звонок 2.0:
•Телефонные номера
•Подмены номеров на сайте
•Гибкая привязка номеров к источникам
•Аналитика