Главная суть
Для оценки качества продвижения необходимо понимать сколько на сайте индексируемых страниц - реальное или приближенное значение.
Реальное количество индексируемых страниц можно получить путем парсинга сайта с настройками краулера приближенными к поисковым системам.
Количество страниц проиндексированных Яндексом (YIndex-Pages) и Google (GIndex-Pages) могут отличаться от реальности. Если это так - значит есть присутствие недостаточно-качественного материала на сайте, дублей мусора и прочего.
Формула
Index-Pages = (реальное кол-во индексируемых документов)
Частный случай
YIndex-Pages = (кол-во страниц в поиске Яндекса)
GIndex-Pages = (кол-во страниц в поиске Google)
В идеале
Index-Pages = YIndex-Pages = GIndex-Pages
Но к такому значению можно приблизиться за счет улучшения показателя Tr-Pages,% => 100%.
От куда брать данные?
Google Search Console
"Индекс" => "Покрытие" => Таб "Страница без ошибок" (таб "Без ошибок, есть предупреждения" также можно учитывать, но можно списать на погрешность) => можно посмотреть значение на определенный день (отображаются данные за последние 3 месяца).

Отчет покрытие в Гугл вебмастере.
Альтернатива. Поиск Google
Используем оператор site:hostname.ru, где hostname.ru - название исследуемого хоста.

Проверка индекса в поиске Google.
Минус подхода: смотрим данные на текущий момент.
Результаты являются значением GIndex-Pages или Index-Pages (если принимаем данное количество за истину).
Яндекс.Вебмастер
"Индексирование" => "Страницы в поиске" => смотрим количество страниц на определенную дату.

Отчет "Страницы в поиске" в вебмастере Яндекс.
Альтернатива. Поиск Яндекс
Используем аналогично оператор host:hostname.ru | host:www.hostname.ru

Проверка индекса в поиске Яндекса. "Нашлось Х результатов" - где Х - нужное нам число.
Минус подхода: смотрим данные на текущий момент.
Результаты являются значением YIndex-Pages или Index-Pages (если принимаем данное количество за истину).
Примечание. В вебмастерах Гугла и Яндекса необходимо смотреть количество страниц в индексе по всем версиям сайта: с префиксом www и без, с http- и https-протоколами - т.е. суммировать показатель.
Инструменты Netpeak Spider или Screaming Frog SEO Spider
Тут важно задать правильные настройки сканирования, аналогично краулерам поисковиков.
Учет файла robots.txt, директивы meta robots noindex, соблюдение тега Canonical, следование редиректам и т.п. Так же желателен учет Sitemap. Это всё делается с целью поиска всех возможных url.
Netpeak Spider
Сканируем сайт с необходимыми настройками и получаем значение ("Индексируемые URL"):

Screaming Frog SEO Spider
Парсим сайт, в фильтре выбираем тип документов "HTML". В столбце "Indexability" - делаем сортировку, чтобы первыми шли "Non-Indexable". Считаем количество таких страниц и вычитаем из общего количества отфильтрованных.
Т.е. считаем количество HTML-контент со значением "Indexable":

Примечание. Помните, что если у вас не настроены базовые редиректы, то url сайта с префиксом www и без, с http- и https-протоколами - то одна страница будет доступной по нескольким url-ам. Существуют и другие варианты дублирования контента, эта тема отдельной статьи.
После парсинга сайта отбираем индексируемые HTML-страницы отдающие код 200. Количество таких страниц является истинным значением Index-Pages.
Вместо заключения
Оценка индекса позволяет выявить проблемы индексации, определить текущий потенциал сайта.
Показатели YIndex-Pages и GIndex-Pages могут быть не точными - в индексе поисковиков могут оставаться еще не склеенные страницы после простановки редиректов и тега Canonical...
Слишком большие различия между поисковиками - могут свидетельствовать о дублировании контента (чаще всего), а также о его низком качестве.
Большие различия между результатами поисковиков и реальным количеством - может говорить об отсутствии корректной настройки индексации сайта.
голосов
Следующие страницы вас также могут заинтересовать:
- Калькулятор конверсии онлайн | Расчет конверсии сайта
- Настройка Cloudflare для защиты и оптимизации сайта
- Userator
- SEO умного фильтра Bitrix
- Сравнение Интентного кластеризатора и Key Collector
Обновлено: 22.12.2020