Доклад посвящен основным техническим ошибкам сайтов, которые могут препятствовать эффективному SEO-продвижению. Рассматриваются важные аспекты технической оптимизации, такие как выбор главного зеркала, настройка 301-редиректов, проблемы с дублированием страниц и мета-тегов, а также создание корректных файлов robots.txt и sitemap. Также представлены рекомендации по исправлению ошибок и инструменты для их проверки.

1. Основныетехнические
ошибки сайтов
Докладчик: Руслан Иванов, SEO-специалист

2. Техническая оптимизация сайта
Выполнение технических доработок — самый первый и
наиболее важный этап поисковой оптимизации сайта. Без
проведения технических доработок эффективное
продвижение сайта значительно усложняется или вовсе
становится невозможным.

3. Основныетехнические ошибки
сайтов
• Не выбрано главноезеркало
• Не настроены 301-е редиректы
• Дубли страниц
• Невернонастроена страница 404-й ошибки
• Отсутствующий илинеправильнооформленный
Robots.txt
• Мета-теги дублируютсяилине заполнены
• Отсутствует илинекорректный Sitemap.xml
• Не настроены ЧПУ
• Некорректное использованиетегов <H1>..<H2>

4. Главноезеркалосайта
www.site.com.ua=> site.com.ua
site.com.ua => www.site.com.ua

5. Как выбратьосновнойдомен?
• еслисайтеще новыйине проиндексирован
поисковыми системами,рекомендуетсявыбирать
более лаконичный URL - http://site.ru/;
• если сайтуже проиндексирован, то необходимодля
начала понять, вкаком видеадрес сайта известен
поисковым системам.

6. НаоснованиииндексаGoogle

7. НаоснованиииндексаЯндекс

8. Настраиваем главноезеркало
1. Самыйпростой способ –301-редирект;
2. Директива «HOST»в robots.txt
3. ЯндексWebmaster
4. Google Webmaster Tools

9. Яндекс Webmaster
Google Webmaster Tools

10. Кодответасервера

11. Важно!
• Приобращении ко всемстраницамсайта,кроме
несуществующих, долженотдаваться код ответа
сервера 200 (ОК,«хорошо»).
• Приобращении ксайту по несуществующему URL
долженотдаваться код ответа сервера 404 («ненайдено»).
• Дляотдельных URL может выполнятся 301-редирект.

12. Как проверить ответасервера
• Яндекс.Вебмастер- http://webmaster.yandex.ua/server-response.xml
• Сторонние сервисы - http://bertal.ru/
• Плагиныдля браузеров -
https://addons.mozilla.org/ru/firefox/addon/firebug/

13. Дубликатыстраницсайта
• Полные дубли —это страницы,содержание которых
идентичнодруг другу, различнытолько их URL.
• Нечеткие дубли —это страницы, которые содержат
очень большое количество одинаковойинформации,но
онине полностью идентичны;их URL также различны.

14. Почемувозникают?
Идентификаторы сессии

15. Почемувозникают?
Неосознанные дубли CMS

16. Почемувозникают?
Результатработы фильтров
• http://site.ru/catalog/page/ – основная страница
• http://site.ru/catalog/page/?filter –страница сортировки товаров
тойже категории

17. Почемувозникают?
Функционалсравнения
товаров
• http://site.ru/item/8244/ –
основная страница товара
• http://site.ru/item/8244/&purchase_sale
=8244 – страница заказа этого
же товара
• http://site.ru/item/8244/&compare=824
4– страница сравнения того
же самого товара с другими
товарами

18. Почемувозникают?
Версия для печати

19. Почемувозникают?
Страницы пагинации

20. Как выявитьдубликаты?
1. Визуальнаяоценка сайта
2. Просмотр поисковойвыдачипо запросу site:site.com.ua
3. Искать по фрагменту текста
4. ПанельвебмастеровGoogle
5. Netpeak Spider
6. Сервисыавтоматизированного аудитасайтов

21. ПанельвебмастеровGoogle

22. ПрограммаNetpeakSpider

23. Сервис audit.megaindex.ru

24. Методыборьбыс дубликатами
1. использование Robots.txt
2. <meta name=«robots» content=«noindex, nofollow»/>
3. <link rel=«canonical» href=«адрес оригинала» />
4. атрибуты rel=«next» иrel=«prev» (длястраниц пагинации)

25. Страница «404» должна:
• отдавать код ответа сервера 404 («ненайдено»);
• быть выполненавдизайнесайта, т.е.содержать главное
меню,общуюдля всегосайта шапку (header)иподвал(footer);
• иметьформу поиска по сайту;
• содержать причину отсутствия страницы иобъяснено, как
посетитель сюда попал;
• содержать предложение «Вернутся на главнуюстраницу», а
также предлагать пользователюперейти насамые
популярные страница сайта илина похожие страницы,
относительно той на которую он хотел перейти.
• Содержать ссылку на html-карту сайта (если она есть).

26. Хорошийпример оформления

27. Креативныйпример
оформления

28. Креативныйпример
оформления

29. Плохой пример оформления

30. ФайлRobots.txt

31. Найдется все

32. Длячего нуженrobots.txt

33. Необходимыйминимум
Закрыть от индексации:
• служебные файлы и каталоги. Какие именнозависитот
выбранной системы управления сайтом.
• результаты поиска по сайту.
• страницу с подпиской по RSS (Вслучае,еслионибудут
присутствовать на сайте)
• страницы для печати (Вслучае,если онибудут
присутствовать на сайте)
• страницы регистрации, восстановленияпароля,
корзину ит.п.

34. Необходимыйминимум
Добавить:
• строчку Sitemap: http://site.com.ua/sitemap.xml
• строчку Host: site.com.ua
Файл расположить адресу site.com.ua/robots.txt
• http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml

35. Пример синтаксиса
User-agent: *
Disallow: /privat/
Host: site.com.ua
Sitemap: http://site.com.ua/sitemap.xml
Проверить корректность robots.txt:
http://webmaster.yandex.ua/robots.xml

36. Title,Description,Keywords

37. Title
Рекомендуется
• Названиедолжноточно
соответствовать
содержаниюстраницы.
• Желательно,чтобы у
каждойстраницы было
свое уникальноеназвание,
сообщающее поисковой
системе о том, как данная
страница отличается от
другихстраниц вашего
сайта.
• Названиядолжныбыть
краткими, но
содержательными.
Не рекомендуется
• Использовать одноито же
названиедля всехили
почти всехстраниц
вашего сайта.
• Использовать слишком
длинныеназвания;
наполнять название
бессвязным набором
ключевых слов.

38. Description
Рекомендуется
• Описание страницы должно
быть интересным и
содержательным для
пользователей,которые
увидятего вкачестве
сниппета на странице
поиска.
• Создайтеуникальное
описание для каждой
страницы.
• Точного ограничения на
количество символовнет,но
рекомендуем ограничиться
150 –200 символамис
пробелами.
Не рекомендуется
• Использовать одно ито же
описание для всехилипочти
всехстраниц вашегосайта.

39. Keywords
Рекомендуется
• Лучшеоставитьэтоттег
пустым,чембездумно
вписывать внего
ключевыеслова.
• Использоватьтолько
ключевыеслова,
которыепредставлены
натекущейстранице.
Нерекомендуется
• Использоватьодниите
жеключевыесловадля
всехилипочтивсех
страницвашегосайта.

40. Карта сайта:xml и html

41. HTML-карта:удобный
рубрикатор

42. Важно!
• Карта сайта должна быть выполнена в дизайне сайта, чтобы
не нарушать его концепцию, не дезориентировать
посетителя и максимально соответствовать его ожиданиям.
Нежелательно использовать графические элементы, чтобы
не сместить акцент с полезности данной страницы на ее
«украшательство».
• Структура карты сайта должна соответствовать иерархии
сайта посетитель, посмотрев на карту, должен без труда
сориентироваться в разделах веб-ресурса, это увеличит его
лояльность.
• Ссылку на карту сайта размещайте на главной странице так,
чтобы пользователь мог легко её найти при необходимости.

43. XML-карта: помощник
поисковика

44. Важно!
• Файл Sitemap долженрасполагаться на том же домене,что
и сайт, длякоторого он составлен.Конкретный адрес
файла вдомене может быть любым.Хотя обычно
http://site-name.com/sitemap.xml
• Приобращении кфайлу сервер долженвозвращатькод
ответа 200.

45. Важно!
• Файл может содержать не более 50 000 URL, а его размерв
несжатом видене долженпревышать 10 Мб. Если ваш
Sitemap не удовлетворяетэтимтребованиям,разбейте его
на несколько отдельных файлови укажите их в файле
индекса Sitemap.
• Профайл индекса Sitemap:
https://support.google.com/webmasters/answer/71453?hl=ru
• Sitemap может описывать только страницы того домена,
на котором он расположен. Страницыподдоменовили
других доменовописывать нельзя.

46. Sitemapвпанели вебмастеров

47. Динамические адресаи ЧПУ
Динамический URL:
http://www.24na7.com.ua/product_info.php?products_id=23198
ЧПУ: http://allo.ua/planshety-i-gadzhety/
Поисковые машиныиспытывают сложности с
индексациейдинамическихстраниц,поэтому они либо
отказываются от их индексациивовсе,либоставят
ограничения на объем искорость индексации.

48. Динамические адресаи ЧПУ
Переходна новуюсистему URL желательновыполнять с
использованием постраничного 301-го редиректа. Т.е.,
чтобы при обращению по каждомустарому URL-адресу
выполнялось перенаправлениенановый.
Кроме того, релевантные словав URL дают
пользователям ипоисковымсистемам больше
информации о странице, чем бессистемный параметр
илинаборсимволов.

49. Теги <h1>…<h6>
Теги <H1>…<H6> предназначены исключительно для
разметки важного текста, поэтому стоит избегать от
использования их в оформлении меню или ссылок, что
является типичной ошибкой верстальщиков при создании
макета сайта.
В тег <H1> на главной странице должно быть заключено
название сайта. В разделах и подразделах в данный тег
должны быть заключены названия этих самых разделов и
подразделов.

50. Теги <h1>…<h6>
На товарных страницах в тег <H1> должно быть заключено
название товара.
С тега <H2> логично начинать описательный текст раздела
или товара.
Синтаксис:
<h1>Фирма Рога и копыта</h1>
<h2>7 причин работать с нами</h2>
<h3>Мы лидеры рынка</h3>

51. Неправильно

52. Правильно

53. Экспресс аудит сайта food-mg.com
1. Выборприоритетного зеркала сайта
Приоритетное зеркало не выбрано. Главная страницасайта доступна понескольким адресам:
http://food-mg.com/ru/
http://www.food-mg.com/ru/
2.Настройкаответов сервера
С главной страницы http://food-mg.com/ стоит 302-й редирект на http://food-mg.com/ru/
Рекомендуется сделать 301-й.
Страницы со слешом и без доступны для индексации:
http://www.food-mg.com/ru/products-and-services/
http://www.food-mg.com/ru/products-and-services
Рекомендуется сделать 301-й на страницы без слеша вконце.

54. Экспресс аудит сайта food-mg.com
3.Страница404
Призапросенесуществующихстраницвида http://food-mg.com/ru/iddqdпользователь попадаетна
следующуюстраницу:
Страницу404рекомендуетсяоформитьв соответствиисоследующимитребованиями:
• Страница404 должнабыть выполненав дизайнесайта,т.е.содержатьглавное меню,общую для
всегосайташапку(header)иподвал (footer).
• Указанапричинаотсутствиястраницыи объяснено,какпосетительсюдапопал.
• Содержатьпредложение «Вернутсяна главную страницу».
• А такжепредлагать пользователю перейтина самыепопулярныестраницасайтаили на
похожиестраницы,относительнотойна которуюонхотелперейти.

55. Экспресс аудит сайта food-mg.com
Сервер отдаеткод404,что соответствуеттому, что страницаненайдена.
4. Robots.txt
Файлнайденпоадресу http://food-mg.com/robots.txt, его текущеенаполнение:
User-agent:*
Disallow:/django/
Рекомендуетсядобавитьдирективу:Host:food-mg.com
User-agent:*
Disallow:/django/
Host:food-mg.com

56. Экспресс аудит сайта food-mg.com
5. Метатеги
На страницахотсутствуютзаполненныеметатегиDescription:
Title:ОливковоемаслоSofraоптомив розницу.
Description:ОливковоемаслоSofraоптомив розницуотФудМаркетГруп.Высокоекачество.Доставкапо
Украине.☎(057) 781-85-09

57. Полезные ссылки:
• Зеркала сайтов http://help.yandex.ru/webmaster/yandex-indexing/site-mirrors.xml ,
https://support.google.com/webmasters/answer/44231?hl=ru
• Использование Robots.txt http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml
• Справочник по кодам ответа сервера: http://help.yandex.ru/webmaster/error-dictionary/http-codes.xml,
https://support.google.com/webmasters/answer/40132?hl=ru
• Google PageSpeedдля Chrome иFireFox https://developers.google.com/speed/pagespeed/
• Firebagдля FireFox: https://addons.mozilla.org/ru/firefox/addon/firebug/
• Подробнее об использовании файла robots.txt http://help.yandex.ru/webmaster/?id=996567;
http://support.google.com/webmasters/bin/answer.py?hl=ru&answer=156449
• Проверка Robots.txt: http://webmaster.yandex.ua/robots.xml
• Подробнее офайлах Sitemap: http://help.yandex.ru/webmaster/?id=1007070
• http://support.google.com/webmasters/bin/answer.py?hl=ru&answer=156184
• Валидатор файлов Sitemap:http://webmaster.yandex.ua/sitemaptest.xml
• Подробнее об заголовках вHTML: http://www.xiper.net/learn/tegofenshuj/headings-in-html.html
• Обатрибутеrel="canonical"https://support.google.com/webmasters/answer/139394?hl=ru
• Подробнее использование атрибутовrel="next" и rel="prev"
http://support.google.com/webmasters/bin/answer.py?hl=ru&answer=1663744
• NetpeakSpiderhttp://netpeak.ua/soft/netpeak-spider/
• ScreamingFroghttp://www.screamingfrog.co.uk/seo-spider/
• Xenuhttp://home.snafu.de/tilman/xenulink.html, http://www.polezno.com/soft/xenu

58. Спасибо за внимание!
Руслан Иванов,
SEO-специалист
Digital-агентство Fresh IT
Украина, г. Харьков, ул. Космическая, 21, оф. 1005
+38 (057) 701-43-81;+38 (057) 761-30-08
freshit.net, ivanov@freshit.net