Мы используем файлы cookie для обеспечения работоспособности сервиса, улучшения навигации и маркетинговых активностей Serpstat. Нажимая "Принять и продолжить", вы соглашаетесь с нашей Политика конфиденциальности

Сообщить об ошибке

Отменить
6321 106
SEO Читать 13 минут

Почему страницы сайта выпадают из индекса, что делать после медицинского апдейта и многое другое

SEO-советы от Дмитрия Шахова
SEO-советы от Дмитрия Шахова
Анастасия Сотула
Анастасия Сотула
Редактор блога Serpstat
Наша ежемесячная телеграм-рубрика #эксперт_на_связи продолжается! В рамках данной рубрики каждый участник чата может задавать вопросы ведущим SEO-экспертам в течение двух часов и получить ответ в реальном времени.

В этот раз нашим гостем был SEO-эксперт Дмитрий Шахов — основатель и руководитель в Remarka. Дима работает на рынке IT с 2002 года, преподает на онлайн-курсах по продвижению и выступает с докладами на профильных конференциях. Я собрала самые интересные вопросы-ответы из чата. Поехали ;)
— Есть ли выводы по новому апдейту Google «июньскому»? Много информационников пострадали. Можно ли говорить о продолжении «медицинского апдейта» но для других ниш?
— Рано судить. Давайте дождемся какой-то внятной статистики, которую можно будет анализировать. Насколько я помню, удачные кейсы выхода из медицинского стали появляться спустя 3-4 месяца.
— Подскажите что делать с сайтом клиники после медицинского апдейта от Google? Варианты вижу такие:
  • уйти полностью в контекст и соцсети;
  • переключиться на Яндекс;
  • пробовать повышать траст инфостатей: линкбилдинг с тематических ресурсов, указание авторства.
— У сайта клиники есть преимущество сейчас. Небольшое, но есть. В связи с медицинскими апдейтами в Google и Яндексе к информационным статьям на сайтах клиник больше доверия со стороны поиска. Там есть информация о самой клинике, о врачах, способы связи с ними — все то, что требует поиск сегодня от статей на медицинскую тему.

Часть клиник уже это поняла и начала заставлять своих врачей писать экспертные материалы на инфочастотники. В самой же статье содержится оффер на услуги.

Да, много мусора из других регионов. Но тут хоть что-то. В остальном перспективы клиник в поиске со сменой интента нозологических запросов стали весьма скромными. Можно бороться за запросы "+клиника", "+врач", навигационные запросы. И те запросы, где смена интента еще не прошла (проверяем на коммерческость).

А в остальном — контекст и соцсети. Контекст будет давать больше. Соцсети в основном на подогреве и ремаркетинге.
Стратегия продвижения новостных агрегаторов, на что обратить внимание при продвижении?
— По новостным сайтам я выступал с большим докладом. Вот тут есть немного. И здесь еще про СМИ-сайты.

Если коротко, то продвижение таких сайтов существенно отличается от продвижения корпоративных. Основной упор на поиске новых ключей, работе с быстровыдачей и индексацией сайта. И везде есть свои фишки, которые коротко не раскрыть. Приходите на консультацию, но сначала посмотрите доклады — может, после них у вас и так будет работы на полгода.
— Сайт-новостник на WordPress. GoogleBot постоянно лезет в файлы .js .css. Можно ли настроить на эти файлы 304 код ответа? Будут ли при этом нормально индексироваться страницы?
— А что вас беспокоит в плане того, что он туда лезет? Бот опрашивает эти файлы, потому что ему надо по DOM построить верстку вашего сайта, чтобы понять, куда пользователь кликает. Зачем мешать ему это делать?
— Чтобы уменьшить нагрузку и ускорить индексацию.
— Поставьте для этих файлов ответ, что страница не менялась. Индексация в любом случае от этого не зависит. Краулинговый бюджет — резиновая история. Он легко наращивается перелинковкой.
— Вопрос: Google не держит в индексе страницы категорий сайта, хотя с технической точки зрения с сайтом все ок. (~20-30% категорий не в индексе).
  • тематика: аренда различных помещений, МСК, страниц в индексе +50к, аптайм 99,99%;
  • URLы вида: site.ru/ arenda-ofisa/metro-sokolniki;
  • вебмастер Google пишет: «Страница просканирована, но пока не проиндексирована»;
  • Google постоянно закидывает и выкидывает из индекса совершенно рандомные страницы категорий, общего между страницами ничего нет.

Есть версия, что проблема в том, что на эти категории не идет трафик, поэтому выкидывает из индекса. Метрику/Analytics смотрели, трафика на такие категории за год было действительно мало с Google и Яндекса, но тут можно перепутать причину со следствием.

Подскажите, пожалуйста, что с этим можно сделать с этим, проблема тянется уже больше года?
— Надо смотреть на сам сайт. По анамнезу похоже на низкое качество. То есть не докручиваете наполнение посадочных, чтобы они удерживались в индексе. Нет разгона ботов по сайту, чтобы компенсировать нехватку внимания с выдачи.

Что делать:
1
Посмотреть общий вид сайта и посадочных.
2
Сделать анализ коммерческих факторов по топу (отличия по оформлению от вашего сайта).
3
Дожать. Или сократить объем посадочных до качественных страниц (востребованных пользователями).
4
Сделать разгон ботов по сайту (например, ротатор).
— Если с сайта удаляются категории, которым нет релевантных, куда лучше редирект ставить? На главную? По карточкам товаров, я так понимаю, что лучше отдавать 410. Но категории имеют трафик, жалко их просто выкидывать.
— Есть несколько вариантов действий:
1
Если категория не имеет значимого трафика, количественно или целевого (к примеру, похожими товарами вы больше не торгуете и не будете никогда), то просто 404 и забыли.

Почему? Потому что интент пользователя не будет раскрыт при дальнейшем хождении по сайту, а это минус вам в поведенческие факторы. И в лучшем случае страница все равно выпадет из индекса.
2
Если есть целевой трафик. Можно некоторое время собирать его и пытаться конвертить. Минимальный план — подсовывать смежные товары. Максимальный — 301 редирект.
3
Если категория вернется когда-нибудь, то 302 редирект на родителя или соседа.
4
Есть значимое ссылочное на страницу. И это ссылочное нельзя изменить на новые страницы или главную. Если работаете под Google — кидаем 301 на главную. Если приоритет на Яндекс — кидаем 301 на ту страницу, которую хотим чутка продвинуть в топ.
5
410 ставят, чтобы побыстрее убить страницу в индексе. Но правила те же. Можно и просто 404 сделать.
— Проблема: делаем в robots.txt отдельные указания для Googlebot, но мусорные страницы все равно лезут в индекс. Такое ощущение, будто Google просто индексирует все на свете и не обращает внимание на robots. Как с этим бороться?
— Обычная история. Sitemap и robots.txt являются рекомендациями для поиска, а не правилами.
1
Боты будут лезть везде. Но это не значит, что они все будут брать в индекс.
2
Верхний приоритет у заголовков страницы. В них ваш сайт возможно отдает разрешение на индексацию. Следующий приоритет у мета. И только потом robots.txt. Тость, если в мета или хидерс есть разрешение на индексацию, то robots.txt, что называется, «курит в сторонке».
Ну и еще может быть путаница с index, follow. Почитайте эксперимент Деваки, поможет.
— Стали бы вы в 2019-ом вкладываться в развитие сайта про игры (рынок растет, но крутых старых ресурсов тьма)? Возможно, в первую очередь стоит сосредоточиться на социальных сетях?
— Сложный вопрос. Я немного далек от этой тематики. Все зависит от объема вложений на единицу трафика. Один из учеников на курсах у меня был с таким сайтом. Нашел несколько «своих» игр и удачно с ними собирает трафик.

Думаю, что при узконишевом применении можно собирать достаточно трафика с новыми сайтами. Глобальный проект я бы, конечно, не стал даже пытаться создавать без серьезных инвестиций в рекламу, в том числе в соцсетях.
— Под узкой нишей вы понимаете выбор и создание контента про, к примеру, конкретный жанр игр, определенную платформу?
— Вышла какая-то игра, у которой хорошая фанбаза. Но на порталах про нее только коротко и ссылка на скачивание. Делаете фансайт и забираете львиную долю фанбазы. Насколько я помню, там были совсем какие-то детские игрушки, в которые играет ну тысяч сто детей одновременно. Но зато забираешь их всех.

P.S.: Я вообще считаю, что семантика — это самое главное для понимания и первое во что нужно вкладывать деньги.
— С помощью анализа семантики можно определить перспективность и конкурентность ниши?
— Не совсем так. Посмотрите лекцию Димы Иванова о прогнозной аналитике и мастер-класс по скорингу запросов от Андрея Буйлова. Есть методики, которые помогают с достоверностью от 25 до 50% оценить большинство ниш в плане конкуренции. Но это затратно по времени и деньгам.

Гораздо проще собрать максимальную семантику, прогнать ее через любой оценщик конкуренции и сделать свой вывод на коленке.

Конкуренцию вы так оцените. А вот перспективность слишком широкое понятие. Можно найти 100 низкочастотных запросов и собирать на них конверсии в 66%. А можно собрать ядро на 100К запросов и миллиард частотки и ничего не получить, кроме проблем.

Все зависит от вашего понимания ниши. Если не очень разбираетесь в ней, то и проверять ее перспективность не стоит.
— Есть сайт мебели, продвигается по России. У него десяток региональных поддоменов. В Яндексе поддомены работают норм, в Google в регионах везде лезет основной домен. У нескольких конкурентов в Google нормально ранжируются поддомены. В чем может быть проблема?
— Потому что это Google. У него субдоменная история работает очень плохо.

Во-первых, Google нужен уникальный контент. И при прочих равных преимущество получит основной домен.

Во-вторых, Google объединяет субдомены и основной домен как бы в одну группу, отчего возникает проблема с регионализацией.

Можно пободаться, привязать субдомены в Google my Business, уникализировать контент. Но большинство просто двигают основной домен на все регионы.
— Аффилят-фильтр по контактам на сайте от Google как долго держится? Есть ли смысл сменить домен?
— Согласно докам он проявляется как понижение аффилята на 20-30 позиций относительно первого сайта. На практике почти не встречается. Думается, что простой смены контактов будет недостаточно и здесь сработка идет по принципам сеточности — по футпринтам.
— Заметили вы разницу в работе ссылок с сайтов которые есть на биржах ссылок от тех которых нет? Бытует мнение, что ссылки с сайтов которых нет на биржах работают сильнее, якобы Google знает кто торгует и вес таких ссылок уменьшает. Делали ли эксперимент?
— Эксперимент не делал. На практике — после снятия ссылок в SAPE проекты или не двигались, или подрастали немного. В агентстве в основном используем биржи статей (миралинкс, ротапост), сравнивать особо не с чем, используем для дожима. Работает, позиции растут.
— Ситуация с интернет-магазином эротических товаров:
  • новый домен (до года);
  • от поставщика получена выгрузки товаров с описанием и характеристиками (товаров около 20К).
После добавления в Яндекс.Вебмастер, он сразу помечает сайт как дорвей, низкокачестваенный и прочее. После отписки Платона все санкции разом снимаются под дружные извинения Платонов.

Но из 20к страниц в индекс попадают лишь около 1К запросов. Выпадают из-за низкокачественности.

Среди конкурентов те же самые страницы (кто работает с этим поставщиком ), с тем же контентом ( даже без дополнительных фишек типа перелинковки на похожие товары) попадают в выдачу. Причем почти все от поставщика.

У нас же на домене ( мы пробовали и .ru, и международную зону) что в Google, что в Яндекс больше 1К страниц в индекс не попадает. Понятно, что сайт новый. Остается только ждать?
— Старая беда в этой тематике. Оценка проходит автоматом и часто заметает под «взрослую» тематику или дорвеи. Надо смотреть историю. Или просто плыть по течению, прорабатывая все по максимуму вслепую.

Могу посоветовать такие приемы:
1
Качнуть ссылочный профиль.
2
Прокачать по максимуму коммерческие факторы до уровня топа.
3
Увеличить разгон по сайту ботов и пользователей (ротаторы).
4
Увеличить непоисковый трафик на сайт.
— Ну и напоследок, какие тематики сайтов не нравилось продвигать? Может быть сформировались направления (за время активной SEO-деятельности), с которыми сложно работать?
— По поводу тематик я всеяден. Но, конечно, все, что находится за гранью добра и зла (мошенники и т.п.) я просто не беру в работу. С полулегальными тематиками работал, но давно, сейчас как-то такие лиды не доходят.
Спасибо всем участникам чата и, конечно, Дмитрию за интересные ответы! Надеюсь, что они стали для вас полезны ;)

А наша рубрика продолжается! Если вы хотите увидеть в ней какого-то эксперта или поучаствовать сами, — пишите имя в комментариях под статьей и наш SMM-специалист свяжется с вами. И вступайте в наш уютный чат, чтобы быть в курсе всех новостей.

Сэкономьте время на изучении Serpstat

Хотите получить персональную демонстрацию сервиса, тестовый период или эффективные кейсы использования Serpstat?

Оставьте заявку и мы свяжемся с вами ;)

Оцените статью по 5-бальной шкале

4.77 из 5 на основе 13 оценок
Нашли ошибку? Выделите её и нажмите Ctrl + Enter, чтобы сообщить нам.