21032 52
How-to Читать 11 минут

Как провести анализ индексации сайта

Как провести анализ индексации сайта
ЧЕК-ЛИСТ: АНАЛИТИКА
Инструкцию одобрил SEO Classifieds Specialist в Inweb
От индексирования сайта зависит его дальнейшее продвижение. Если вы создадите более тысячи качественных и уникальных страниц, но они будут не проиндексированы, никакого результата вы не получите. Для этого необходим анализ индексации сайта, о котором мы расскажем в статье. Также рассмотрим, как быстро проиндексировать сайт.

Что такое индексация сайта

Индексация сайта — процесс, при котором бот поисковой системы добавляет сведения о ресурсе в базу данных поисковика для последующего поиска информации на сайтах, которые были проиндексированы. В процессе индексации поисковые боты сканируют и обрабатывают текстовые данные, картинки, видео, документы, аудио. Индексацией можно управлять с помощью определенных директив в файле robots.txt и тегов на веб-страницах, при желании можно закрывать доступ роботам к некоторым страницам, разделам или всему сайту.

Благодаря индексации пользователям доступен поиск всей необходимой информации в интернете, а владельцы ресурсов могут продвигать свои проекты в поисковых системах.

Зачем проводить анализ индексации сайта


Проверка индексации страниц необходима, чтобы вебмастер был в курсе, как роботы сканируют сайт, не возникают ли при этом ошибки. Если сайт плохо индексируется у него будет низкая посещаемость, вследствие которой он не будет приносить прибыль. У интернет-магазина не будет достаточного количества продаж, а информационные проекты не заинтересуют рекламодателей. Чтобы опередить конкурентов в выдаче, важно обеспечить наличие всех необходимых страниц в выдаче поисковых систем.

Мониторинг количества страниц в поиске проводится постоянно. Увеличение количества страниц в поиске помогает сайту ранжироваться по большему количеству запросов и улучшает позиции в выдаче.

Google Console & Яндекс.Вебмастер

Индексация сайта в поисковых системах проводится отдельно для каждого поисковика. Поэтому анализировать ее тоже нужно по отдельности.

Основной инструмент, в котором можно отправить запрос на добавление страницы в поисковый индекс Google — Search Console. Для поиска Яндекс — Яндекс.Вебмастер. С их помощью вы повлияете на сканирование страниц, например, отправив страницу на повторное сканирование после устранения ошибки. Выглядит интерфейс Search Console так:
Статус индексирования Google Search Console
Проверка статуса индексирования в Search Console
Интерфейс Яндекс.Вебмастер:
Проверка индексации страниц в Яндексе
Проверка индексации страниц в Яндекс.Вебмастере

Сколько нужно времени для индексации сайта

Отправить запрос на индексацию сайта в Google можно в Search Console. Для этого укажите адрес XML-карты сайта в разделе Sitemap. Должно пройти определенное время перед тем, как все страницы нового сайта окажутся в индексе, ориентировочно несколько месяцев.

При отправке отдельной страницы в индекс с помощью инструмента «Проверка URL» Search Console индексация может произойти как через несколько минут, так и через несколько недель. В отдельных случаях Google может вообще не проиндексировать страницу, посчитав ее недостаточно качественной, неуникальной или дублирующей ранее размещенную на сайте информацию. В этом случае отправлять запрос на повторное индексирование страницы без ее предварительного изменения и улучшения не имеет смысла.

Индексация сайта Яндексом занимает примерно такие же сроки, как и Гуглом. Добавить ссылку на XML-карту сайта можно В Яндекс.Вебмастере в разделе «Индексирование», выбрав «Файлы Sitemap».

Как проверять индексацию сайта самостоятельно?

1
Добавьте сайт в панель и подтвердите права доступа удобным способом.
2
Мониторьте индексирование через путь: Индекс Google > Статус индексирования.
3
Выполните такие же действия для Яндекс.Вебмастера. Путь для просмотра: Индексирование > Страницы в поиске.
В расширенных данных вы получите информацию о заблокированных к индексации страницах файлом robots.txt. Учитывая нововведения, которые произошли в Search Console, стоит отметить, что вы увидите страницы, которые были проиндексированы несмотря на запрет в robots.txt.
Важно: Распространенная ошибка заключается в блокировке индексации через директивы robots.txt. Если вы заметили, что сайт не индексируется, начните поиск проблемы отсюда, возможно, роботы не могут его проиндексировать.
Ресурс в разделе Технической поддержки официально объявляет, что информация может «частично соответствовать» виду в поиске. Подробное объяснение здесь. Причины следующие:
Статус индексирования и результаты поиска в Google
Информация по статусу индексирования от Google
Важно: Все сообщения об ошибках индексации вы получаете на той же площадке. Также они дублируются письмом на вашу почту. Все обнаруженные ошибки нужно устранить и отправить страницы на переиндексацию.

Как проверить полученную из Google Search Console информацию

Проверьте полученную информацию просто и быстро при помощи операторов:
Как проверить сайт на индексацию
Оператор Site
В поиске вы увидите такую картину:
Проверка на индексацию страниц с помощью оператора site
Пример проверки индексации страниц с помощью оператора Site в Google
«Результатов примерно…» — это и есть количество проиндексированных страниц в поиске. Для Яндекса ситуация схожая:
Как проверить индексацию страниц с помощью оператора site
Пример проверки индексации страниц с помощью оператора Site в Яндекс
Операторы Яндекса подробно описаны в Яндекс.Помощи.

Также можно быстро узнать видимость домена с помощью Serpstat. Показатель видимости учитывает количество фраз, по которым ранжируется домен, и их частотность.

Плагины и букмарклеты

В некоторых онлайн сервисах также предлагается массовая проверка индексации сразу в нескольких поисковых системах. Проверки могут быть платными и бесплатными.

Для экономии времени вебмастерам удобнее работать со встроенными плагинами, например, RDS bar, который бесплатно устанавливается через магазин и работает прямо в панели Google Chrome.
Плагин для анализа индексации RDS bar
Информация об индексации сайта в плагине RDS bar
Одним кликом по иконке в браузере вы откроете базовую информацию по сайту. В том числе по количеству страниц в индексе.

Вспомогательные сервисы для проверки на индексацию

1
Воспользуйтесь готовыми инструментами, которые проводят анализ сайта. Например, в Аудите сайта Serpstat можно проверить, сколько страниц не проиндексировано и наличие технических ошибок на сайте.

Нажмите на кнопку ниже и создайте проект для сайта ↓
Перед началом сканирования введите необходимые настройки: название домена, количество страниц, скорость сканирования, тип сканирования и т.д.:
После окончания сканирования в Суммарном отчете на графике можно проверить, какое количество из указанного в настроках перед запуском аудита страниц не проиндексировано:
Проверка непроиндексированных страниц в Аудите Serpstat
Информация о количестве непроиндексированных страниц в отчете
Хотите узнать, как с помощью Serpstat найти и исправить технические ошибки на сайте?
Оставьте заявку и наши специалисты проконсультируют вас по продвижению вашего проекта, поделятся учебными материалами и инсайтами рынка!
Персональная демонстрация
Оставьте заявку и мы проведем для вас персональную демонстрацию сервиса, предоставим пробный период и предложим комфортные условия для старта использования инструмента
2
Подойдет и комплексный аудит сайта от saitreport поможет посмотреть количество проиндексированных страниц бесплатно:
Индексация в поисковых системах saitreport
Проверка индексации в Saitreport
3
Или используйте другие удобные для вас помощники: a.pr-cy, sitechecker.
Проверка индексации в поисковых системах a.pr-cy.ru
Проверка индексации в сервисе a.pr-cy.ru
3
Каждый SEO анализатор в 80% случаев включает информацию об индексировании сайта. Анализаторы генерируют готовые отчеты, что освободит вас от ручного управления. Ряд инструментов работает под задачи SEO и позволяет добавлять разные сайты/компании для мониторинга, чтобы все информация была в одном месте.

Для получения информации по каждой странице воспользуйтесь Netpeak Checker. Выгрузите все URL, а Netpeak Checker проверит индексацию страниц вашего сайта. Это займет время, но результат будет точным и полным.

Заключение

Способы проверки индексации сайта:

  • с помощью Google Search Console & Яндекс.Вебмастер;
  • с помощью операторов;
  • с помощью плагинов и букмарклетов;
  • с помощью вспомогательных сервисов.

Отслеживайте индексирование сайта регулярно и вносите информацию в отчет. Подобные таблицы делайте вручную или используйте готовые отчеты в вспомогательных сервисах. Примеры и ссылки указаны выше. Совмещайте несколько инструментов для большей точности информации.

Зачем это нужно? Чтобы держать руку на пульсе. Если страницы уникальны и качественны, но долгое время не индексируются, пора искать проблему. Регулярно собирайте информацию о соотношении проиндексированных страниц и динамике их индексации, отслеживайте тренды. Такой подход даст вам возможность вовремя внести изменения в стратегию продвижения.

FAQ

Как узнать количество страниц на сайте?

Узнать количество страниц на ресурсе можно с помощью анализа файла sitemap.xml. Его в большинстве случаев можно просмотреть по адресу site.com/sitemap.xml. Приблизительное количество страниц сайта можно также узнать с помощью оператора site:, добавив к нему адрес ресурса и отправив данный поисковый запрос в Яндексе или Google.

Как проверить статус индексирования?

Проверить индексацию страниц в Google можно в разделе «Индекс» → «Покрытие» Google Search Console. Проверку индексации сайта в Яндексе проводят в Яндекс.Вебмастере. Помимо этого, можно использовать оператор Site или плагин RDS bar.

Как ускорить индексацию страниц сайта?

Отдельные страницы можно отправить на переиндексацию с помощью Search Console и Яндекс.Вебмастер. Также важно, чтобы были корректно настроены XML-карта сайта, robots.txt, правильно прописаны теги на веб-страницах. На индексацию положительно влияет регулярное добавление качественного уникального контента, ускорение загрузки страниц, внутренняя перелинковка и другие факторы.

Как запретить индексацию сайта?

Чтобы запретить индексацию сайта, можно добавить соответствующую директиву в файл robots.txt: User-agent: * Disallow: / Если проект на WordPress, можно отметить в настройках: «Попросить поисковые системы не индексировать сайт», тогда директива, запрещающая индексацию, добавится в robots.txt автоматически.

Задавайте вопросы в комментариях или пишите в техподдержку.:) А также вступайте в чат любителей Серпстатить и подписывайтесь на наш канал в Telegram.

Сэкономьте время на изучении Serpstat

Хотите получить персональную демонстрацию сервиса, тестовый период или эффективные кейсы использования Serpstat?

Оставьте заявку и мы свяжемся с вами ;)

Оцените статью по 5-бальной шкале

3.9 из 5 на основе 10 оценок
Нашли ошибку? Выделите её и нажмите Ctrl + Enter, чтобы сообщить нам.

Поделитесь статьей с вашими друзьями

Вы уверены?

Знакомство с Serpstat

Узнайте об основных возможностях сервиса удобным способом!

Отправьте заявку и наш специалист предложит вам варианты обучения: персональную демонстрацию, пробный период или материалы для самостоятельного изучения и повышения экспертизы. Все для комфортного начала работы с Serpstat.

Имя

Email

Телефон

Будем рады вашему комментарию
Я принимаю условия Политики конфиденциальности.

Спасибо, мы сохранили ваши новые настройки рассылок.

Сообщить об ошибке

Отменить

Мы используем файлы cookie для обеспечения работоспособности сервиса, улучшения навигации и маркетинговых активностей Serpstat. Нажимая "Принять и продолжить", вы соглашаетесь с нашей Политика конфиденциальности

Открыть чат технической поддержки
mail pocket flipboard Messenger telegramm