Конкурентный шпионаж
Нестандартные методики
Дмитрий Мазурян Tonti Laguna / Netpeak Group
◪ Занимаюсь SEO с 2007 года.
◪ Работал информационными порталами,
интернет-магазинами, нишевыми
сайтами под СНГ и Запад.
◪ С 2016 года являюсь частью секретной
команды Tonti Laguna в Netpeak Group.
◪ Люблю автоматизацию, исследования,
API.
◪ Регулярно изучаю выдачу и конкурентов.
Зачем
анализировать
конкурентов?
Новые идеи
Быть на чеку
О чём доклад
Дмитрий Мазурян
Методики анализа конкурентов
1. Футпринты, на которые не обращают внимание.
2. Подглядываем по трафику.
3. Как найти скрытые PBN.
4. Все сетки трафиковых сайтов на ладони.
Футпринты
1. Футпринты
Дмитрий Мазурян
Футпринт (англ. footprint) - уникальная часть кода страниц сайта,
позволяющая его выделить среди остальных.
Обычно смотрят на:
- Whois
- IP, DNS
- Контент
1. Футпринты
Дмитрий Мазурян
Еще есть сторонние сервисы и скрипты
1. Футпринты
Дмитрий Мазурян
ReCAPTCHA - 2 млн. доменов
1. Футпринты
Дмитрий Мазурян
ReCAPTCHA
Палится по ключу сайта
1. Футпринты
Дмитрий Мазурян
Google Maps
4 млн. доменов
1. Футпринты
Дмитрий Мазурян
Google Maps - палится по API-ключу
1. Футпринты
Дмитрий Мазурян
Популярные технологии, на которые стоит обращать внимание:
- Disqus
- Jivo Chat
- Рекламные скрипты
- Affiliate скрипты. Например, Admitad
- Push-скрипты. Например, Pushwoosh
1. Футпринты
Дмитрий Мазурян
Как искать?
1. Определяем сторонние системы на сайте:
1.1. Через исходный код страниц.
1.2. SimilarTech.
2. Проверяем, где стоит такой же:
2.1. Готовые сервисы: publicwww.com, nerdydata.com
2.2. Парсим выдачу и проверяем код страниц. Например, связкой Netpeak
Checker + Spider.
Подсматриваем трафик
2. Анализ трафика
Дмитрий Мазурян
На что обращать внимание?
- Поддомены
- Входящий трафик
- Исходящий трафик
- Интересы (Also Visited)
2. Анализ трафика
Дмитрий Мазурян
Находим возможности
Конкуренты
Эффективные
рекламные сети
Неиспользуемые
каналы
Партнерские
сайты
2. Анализ трафика
Дмитрий Мазурян
Allo vs Rozetka
Rozetka.com.ua Новые
рекламные сети
Источники реф.
трафа
Seller.Rozetka.com.
ua
Api.Seller.Rozetka.c
om.ua
Sellerhelp.Rozetka.
com.ua
Pricecreator.Rozetka.
com.ua
Поддомены
Поддомены
Входящий трафик
Новые партнеры
2. Анализ трафика
Дмитрий Мазурян
2. Анализ трафика
Дмитрий Мазурян
Находим сайты для трафиковых ссылок
2. Анализ трафика
Дмитрий Мазурян
Находим топовые сайты у партнерок
2. Анализ трафика
Дмитрий Мазурян
Что еще можно найти?
- Все сайты из PBN
- Остальные сайты конкурентов
- Новые источники для развития
- Идеи
2. Анализ трафика
Дмитрий Мазурян
Как анализировать трафик?
- SimilarWeb
- Semrush
- Alexa
- Не закрытые логи
Скрытые PBN
3. Скрытые PBN
Дмитрий Мазурян
Создатели PBN прячут свои сайты от SEO-инструментов.
Через .htaccess
RewriteEngine On
RewriteBase /
RewriteCond %{HTTP_USER_AGENT} .*AhrefsBot.* [OR]
RewriteCond %{HTTP_USER_AGENT} .*SemrushBot.*
RewriteRule ^(.*)$ http://www.anotherdomain.com/
[L,R=301]
Order Allow,Deny
Allow from all
Deny from 216.123.8.0/8
Через robots.txt
User-agent: SemrushBot Disallow: /
User-agent: xenu Disallow: /
User-agent: MJ12bot Disallow: /
User-agent: AhrefsBot Disallow: /
3. Скрытые PBN
Дмитрий Мазурян
1. Новые боты SEO-инструментов
Примеры:
- Serpstat
- Seranking
3. Скрытые PBN
Дмитрий Мазурян
2. Поисковые системы
Обновленная панель
вебмастеров в Bing
Палим сетки
через ads.txt
4. Ads.txt + Adsense
Дмитрий Мазурян
Ads.txt - файл для указания авторизованных продавцов
рекламы на сайте.
Файл ads.txt, в основном, находится в корне сайта.
Удобно парсить
4. Ads.txt + Adsense
Дмитрий Мазурян
Google Adsense:
1. Самая распространенная рекламная система в интернете.
~3.5 млн. сайтов.
2. Требует указывать pub-id аккаунта в ads.txt.
3. Запрещает использовать несколько аккаунтов.
~900к активных аккаунтов
~3.9 сайтов на аккаунт
4. Ads.txt + Adsense
Дмитрий Мазурян
Есть куча сервисов для поиска сайтов по pub-id:
- adstxt.com
- spyify.com
- dnslytics.com
4. Ads.txt + Adsense
Дмитрий Мазурян
Сетка международных прайс-агрегаторов
4. Ads.txt + Adsense
Дмитрий Мазурян
Сетка онлайн-конвертеров
4. Ads.txt + Adsense
Дмитрий Мазурян
Сетка информационных сайтов
4. Ads.txt + Adsense
Дмитрий Мазурян
Сетка порталов с вакансиями
Подведем итоги
Дмитрий Мазурян
1. Распространенные технологии
помогают палить сетки сайтов.
2. Анализ трафика вообще огонь.
3. В Bing вебмастерке можно
смотреть бэки конкурентов и
даже PBN.
4. Через ads.txt удобно собирать
инфу по сеткам
информационных сайтов.
Спасибо за внимание
Дмитрий Мазурян
Tonti Laguna, Netpeak Group
Facebook: /dmazya
Telegram: dmazya
Бонусные слайды
2. Анализ трафика
Дмитрий Мазурян
Находим другие сайты конкурентов
Сайт команды
Рабочие сайты
команды
Другие сайты
Поддомены
Исходящий трафик
Интересы
Исходящий трафик
Интересы
Входящий трафик
Интересы
Поддомены
Исходящий трафик
Входящий трафик
Интересы
Интересы
2. Анализ трафика
Дмитрий Мазурян
Находим PBN
Известный сайт
из PBN
Сайты команды
Другой сайт PBN
Входящий
трафик
Исходящий
трафик
Входящий
трафик
Остальные сайты
PBNИнтересы

Дмитрий Мазурян. Конкурентный шпионаж. Нестандартные методики