· Количество проиндексированных страниц в «Яндексе» и Google
«Яндекс.Вебмастер» – Индексирование – Структура сайта
Инструменты для веб-мастеров – Индекс Google – Статус индексирования
Общее количество страниц вашего сайта и количество проиндексированных страниц должны быть примерно одинаковыми. Если в индексе намного меньше страниц, чем есть на вашем сайте, это может означать следующие проблемы: ваш контент плохо оптимизирован под поисковые системы, вы случайно закрыли их от индексации, на сайт наложен фильтр и др.
· Запросы, по которым сайт находится в топе
Эту информацию можно получить с помощью любого из сервисов по снятию позиций. Мы приведем скриншот из сервиса SerpStat.
Запросы, по которым сайт имеет наилучшие позиции в «Яндексе» в регионе Москва
· Среднесуточный трафик
Этот показатель можно посмотреть в сервисе Liveinternet.
Liveinternet – Посещаемость – По месяцам – Среднесуточные
· Источники трафика
Этот показатель можно посмотреть в сервисе Liveinternet. А если вы хотите более подробные данные, то лучше воспользоваться сервисами статистики «Яндекс.Метрика» и Google Analytics.
Liveinternet – Посетители с сайтов – По месяцам
Выявление и устранение основных технических ошибок
Файл robots.txt
Robots.txt — это файл, в котором указаны параметры для индексации сайта. Необходимо, чтобы файл robots.txt был составлен правильно. Проверить это можно с помощью специального сервиса от Яндекс. Файл должен содержать несколько обязательных директив, корректно составлен и загружен в корень сайта.
XML-карта сайта
С помощью sitemap.xml мы сообщаем поисковой системе о том, какие страницы вашего ресурса необходимо проиндексировать и как часто они обновляются.
7. 301 редирект домена без www на домен с www (или наоборот)
Для поисковых систем домен с www и без www – это два абсолютно разных сайта. Для того чтобы показать им, что это один сайт, чтобы они индексировали и ранжировали его как единое целое, необходимо поставить 301 редирект с второстепенного домена на основной (SEO-оптимизаторы называют его главное зеркало). Как это сделать?
«Яндекс». Заходим в «Яндекс.Вебмастер», нажимаем на кнопку «Перейти», а затем на кнопку с плюсиком:
«Яндекс.Вебмастер» – Добавить новый сайт
Google. Заходим в Google для вебмастеров и нажимаем на кнопку «Добавить ресурс»:
Google для вебмастеров – «Добавить ресурс»
В обоих случаях вводим то название сайта, которое считаем главным. Чтобы определить, какую версию сайта (с www или без www) поисковая система считает главной, вбейте в строку поиска «site:домен вашего сайта с www и без www» и посмотрите, где больше проиндексировано страниц:
Более 9 миллионов результатов в выдаче, значит, Google считает главным сайт с www
В случае, если поисковые системы считают главными разные версии сайта, необходимо посмотреть, откуда идет больше трафика и выбрать ту, которая более важна для продвижения вашего бизнеса.
P.S. После настройки редиректа не забудьте прописать директиву в файл robots.txt. Host: www.site.ru (с www или без www соответственно).
Главное зеркало нашего сайта
Дубли главной страницы
Дублирование ссылок на одну и ту же страницу сайта не приветствуется поисковиками. Поэтому, если у вашей главной страницы есть несколько дублей (например, https://www.site.ru/, https://www.site.ru/index.html и https://www.site.ru/index.php), от них нужно срочно избавиться. Для этого снова воспользуемся 301 редиректом. Действия точно такие же, как и в предыдущем пункте, только немного меняется код.
Код, который позволит вам избавиться от /index.php
Код, который позволит вам избавиться от /index.html
Полный список кодов для 301 редиректов в очень удобном компактном виде можно найти здесь.
Дублированный контент
Чтобы найти дублированный контент, воспользуемся бесплатной программой Xenu. Скачиваем по ссылке, устанавливаем и запускаем. После этого нажимаем File – Check URL, вбиваем домен своего сайта и жмем ОК. После того как приложение просканирует ваш сайт, выбираем сортировку по Title и смотрим, какие заголовки повторяются.
Поиск дублированного контента с помощью программы Xenu
Тег noindex
Тег noindex необходим, чтобы помочь поисковому роботу сориентироваться на конкретной странице, например, не индексировать пункты меню, данные форм и прочую служебную информацию. Данный тег понимает только «Яндекс», для Google он ничего не значит. Тем не менее, его использование немного повышает уровень доверия поисковика к сайту. Подробно о теге noindex и о том, как его использовать, можно почитать здесь.