Serpstat использует файлы cookie для обеспечения работоспособности сервиса, улучшения навигации, предоставления возможности связаться с командой поддержки, а также маркетинговых активностей Serpstat.

Нажав кнопку "Принять и продолжить", вы соглашаетесь с Политики конфиденциальности

Принять и продолжить

Закрыть

Сообщить об ошибке

Отменить
2705 35 4
SEO Читать 13 минут 11 июля 2019

Почему страницы сайта выпадают из индекса, что делать после медицинского апдейта и многое другое

SEO-советы от Дмитрия Шахова
SEO-советы от Дмитрия Шахова
Анастасия Сотула
Анастасия Сотула
Редактор блога Serpstat
Наша ежемесячная телеграм-рубрика #эксперт_на_связи продолжается! В рамках данной рубрики каждый участник чата может задавать вопросы ведущим SEO-экспертам в течение двух часов и получить ответ в реальном времени.

В этот раз нашим гостем был SEO-эксперт Дмитрий Шахов — основатель и руководитель в Remarka. Дима работает на рынке IT с 2002 года, преподает на онлайн-курсах по продвижению и выступает с докладами на профильных конференциях. Я собрала самые интересные вопросы-ответы из чата. Поехали ;)
— Есть ли выводы по новому апдейту Google «июньскому»? Много информационников пострадали. Можно ли говорить о продолжении «медицинского апдейта» но для других ниш?
— Рано судить. Давайте дождемся какой-то внятной статистики, которую можно будет анализировать. Насколько я помню, удачные кейсы выхода из медицинского стали появляться спустя 3-4 месяца.
— Подскажите что делать с сайтом клиники после медицинского апдейта от Google? Варианты вижу такие:
  • уйти полностью в контекст и соцсети;
  • переключиться на Яндекс;
  • пробовать повышать траст инфостатей: линкбилдинг с тематических ресурсов, указание авторства.
— У сайта клиники есть преимущество сейчас. Небольшое, но есть. В связи с медицинскими апдейтами в Google и Яндексе к информационным статьям на сайтах клиник больше доверия со стороны поиска. Там есть информация о самой клинике, о врачах, способы связи с ними — все то, что требует поиск сегодня от статей на медицинскую тему.

Часть клиник уже это поняла и начала заставлять своих врачей писать экспертные материалы на инфочастотники. В самой же статье содержится оффер на услуги.

Да, много мусора из других регионов. Но тут хоть что-то. В остальном перспективы клиник в поиске со сменой интента нозологических запросов стали весьма скромными. Можно бороться за запросы "+клиника", "+врач", навигационные запросы. И те запросы, где смена интента еще не прошла (проверяем на коммерческость).

А в остальном — контекст и соцсети. Контекст будет давать больше. Соцсети в основном на подогреве и ремаркетинге.
Стратегия продвижения новостных агрегаторов, на что обратить внимание при продвижении?
— По новостным сайтам я выступал с большим докладом. Вот тут есть немного. И здесь еще про СМИ-сайты.

Если коротко, то продвижение таких сайтов существенно отличается от продвижения корпоративных. Основной упор на поиске новых ключей, работе с быстровыдачей и индексацией сайта. И везде есть свои фишки, которые коротко не раскрыть. Приходите на консультацию, но сначала посмотрите доклады — может, после них у вас и так будет работы на полгода.
— Сайт-новостник на WordPress. GoogleBot постоянно лезет в файлы .js .css. Можно ли настроить на эти файлы 304 код ответа? Будут ли при этом нормально индексироваться страницы?
— А что вас беспокоит в плане того, что он туда лезет? Бот опрашивает эти файлы, потому что ему надо по DOM построить верстку вашего сайта, чтобы понять, куда пользователь кликает. Зачем мешать ему это делать?
— Чтобы уменьшить нагрузку и ускорить индексацию.
— Поставьте для этих файлов ответ, что страница не менялась. Индексация в любом случае от этого не зависит. Краулинговый бюджет — резиновая история. Он легко наращивается перелинковкой.
— Вопрос: Google не держит в индексе страницы категорий сайта, хотя с технической точки зрения с сайтом все ок. (~20-30% категорий не в индексе).
  • тематика: аренда различных помещений, МСК, страниц в индексе +50к, аптайм 99,99%;
  • URLы вида: site.ru/ arenda-ofisa/metro-sokolniki;
  • вебмастер Google пишет: «Страница просканирована, но пока не проиндексирована»;
  • Google постоянно закидывает и выкидывает из индекса совершенно рандомные страницы категорий, общего между страницами ничего нет.

Есть версия, что проблема в том, что на эти категории не идет трафик, поэтому выкидывает из индекса. Метрику/Analytics смотрели, трафика на такие категории за год было действительно мало с Google и Яндекса, но тут можно перепутать причину со следствием.

Подскажите, пожалуйста, что с этим можно сделать с этим, проблема тянется уже больше года?
— Надо смотреть на сам сайт. По анамнезу похоже на низкое качество. То есть не докручиваете наполнение посадочных, чтобы они удерживались в индексе. Нет разгона ботов по сайту, чтобы компенсировать нехватку внимания с выдачи.

Что делать:
1
Посмотреть общий вид сайта и посадочных.
2
Сделать анализ коммерческих факторов по топу (отличия по оформлению от вашего сайта).
3
Дожать. Или сократить объем посадочных до качественных страниц (востребованных пользователями).
4
Сделать разгон ботов по сайту (например, ротатор).
— Если с сайта удаляются категории, которым нет релевантных, куда лучше редирект ставить? На главную? По карточкам товаров, я так понимаю, что лучше отдавать 410. Но категории имеют трафик, жалко их просто выкидывать.
— Есть несколько вариантов действий:
1
Если категория не имеет значимого трафика, количественно или целевого (к примеру, похожими товарами вы больше не торгуете и не будете никогда), то просто 404 и забыли.

Почему? Потому что интент пользователя не будет раскрыт при дальнейшем хождении по сайту, а это минус вам в поведенческие факторы. И в лучшем случае страница все равно выпадет из индекса.
2
Если есть целевой трафик. Можно некоторое время собирать его и пытаться конвертить. Минимальный план — подсовывать смежные товары. Максимальный — 301 редирект.
3
Если категория вернется когда-нибудь, то 302 редирект на родителя или соседа.
4
Есть значимое ссылочное на страницу. И это ссылочное нельзя изменить на новые страницы или главную. Если работаете под Google — кидаем 301 на главную. Если приоритет на Яндекс — кидаем 301 на ту страницу, которую хотим чутка продвинуть в топ.
5
410 ставят, чтобы побыстрее убить страницу в индексе. Но правила те же. Можно и просто 404 сделать.
— Проблема: делаем в robots.txt отдельные указания для Googlebot, но мусорные страницы все равно лезут в индекс. Такое ощущение, будто Google просто индексирует все на свете и не обращает внимание на robots. Как с этим бороться?
— Обычная история. Sitemap и robots.txt являются рекомендациями для поиска, а не правилами.
1
Боты будут лезть везде. Но это не значит, что они все будут брать в индекс.
2
Верхний приоритет у заголовков страницы. В них ваш сайт возможно отдает разрешение на индексацию. Следующий приоритет у мета. И только потом robots.txt. Тость, если в мета или хидерс есть разрешение на индексацию, то robots.txt, что называется, «курит в сторонке».
Ну и еще может быть путаница с index, follow. Почитайте эксперимент Деваки, поможет.
— Стали бы вы в 2019-ом вкладываться в развитие сайта про игры (рынок растет, но крутых старых ресурсов тьма)? Возможно, в первую очередь стоит сосредоточиться на социальных сетях?
— Сложный вопрос. Я немного далек от этой тематики. Все зависит от объема вложений на единицу трафика. Один из учеников на курсах у меня был с таким сайтом. Нашел несколько «своих» игр и удачно с ними собирает трафик.

Думаю, что при узконишевом применении можно собирать достаточно трафика с новыми сайтами. Глобальный проект я бы, конечно, не стал даже пытаться создавать без серьезных инвестиций в рекламу, в том числе в соцсетях.
— Под узкой нишей вы понимаете выбор и создание контента про, к примеру, конкретный жанр игр, определенную платформу?
— Вышла какая-то игра, у которой хорошая фанбаза. Но на порталах про нее только коротко и ссылка на скачивание. Делаете фансайт и забираете львиную долю фанбазы. Насколько я помню, там были совсем какие-то детские игрушки, в которые играет ну тысяч сто детей одновременно. Но зато забираешь их всех.

P.S.: Я вообще считаю, что семантика — это самое главное для понимания и первое во что нужно вкладывать деньги.
— С помощью анализа семантики можно определить перспективность и конкурентность ниши?
— Не совсем так. Посмотрите лекцию Димы Иванова о прогнозной аналитике и мастер-класс по скорингу запросов от Андрея Буйлова. Есть методики, которые помогают с достоверностью от 25 до 50% оценить большинство ниш в плане конкуренции. Но это затратно по времени и деньгам.

Гораздо проще собрать максимальную семантику, прогнать ее через любой оценщик конкуренции и сделать свой вывод на коленке.

Конкуренцию вы так оцените. А вот перспективность слишком широкое понятие. Можно найти 100 низкочастотных запросов и собирать на них конверсии в 66%. А можно собрать ядро на 100К запросов и миллиард частотки и ничего не получить, кроме проблем.

Все зависит от вашего понимания ниши. Если не очень разбираетесь в ней, то и проверять ее перспективность не стоит.
— Есть сайт мебели, продвигается по России. У него десяток региональных поддоменов. В Яндексе поддомены работают норм, в Google в регионах везде лезет основной домен. У нескольких конкурентов в Google нормально ранжируются поддомены. В чем может быть проблема?
— Потому что это Google. У него субдоменная история работает очень плохо.

Во-первых, Google нужен уникальный контент. И при прочих равных преимущество получит основной домен.

Во-вторых, Google объединяет субдомены и основной домен как бы в одну группу, отчего возникает проблема с регионализацией.

Можно пободаться, привязать субдомены в Google my Business, уникализировать контент. Но большинство просто двигают основной домен на все регионы.
— Аффилят-фильтр по контактам на сайте от Google как долго держится? Есть ли смысл сменить домен?
— Согласно докам он проявляется как понижение аффилята на 20-30 позиций относительно первого сайта. На практике почти не встречается. Думается, что простой смены контактов будет недостаточно и здесь сработка идет по принципам сеточности — по футпринтам.
— Заметили вы разницу в работе ссылок с сайтов которые есть на биржах ссылок от тех которых нет? Бытует мнение, что ссылки с сайтов которых нет на биржах работают сильнее, якобы Google знает кто торгует и вес таких ссылок уменьшает. Делали ли эксперимент?
— Эксперимент не делал. На практике — после снятия ссылок в SAPE проекты или не двигались, или подрастали немного. В агентстве в основном используем биржи статей (миралинкс, ротапост), сравнивать особо не с чем, используем для дожима. Работает, позиции растут.
— Ситуация с интернет-магазином эротических товаров:
  • новый домен (до года);
  • от поставщика получена выгрузки товаров с описанием и характеристиками (товаров около 20К).
После добавления в Яндекс.Вебмастер, он сразу помечает сайт как дорвей, низкокачестваенный и прочее. После отписки Платона все санкции разом снимаются под дружные извинения Платонов.

Но из 20к страниц в индекс попадают лишь около 1К запросов. Выпадают из-за низкокачественности.

Среди конкурентов те же самые страницы (кто работает с этим поставщиком ), с тем же контентом ( даже без дополнительных фишек типа перелинковки на похожие товары) попадают в выдачу. Причем почти все от поставщика.

У нас же на домене ( мы пробовали и .ru, и международную зону) что в Google, что в Яндекс больше 1К страниц в индекс не попадает. Понятно, что сайт новый. Остается только ждать?
— Старая беда в этой тематике. Оценка проходит автоматом и часто заметает под «взрослую» тематику или дорвеи. Надо смотреть историю. Или просто плыть по течению, прорабатывая все по максимуму вслепую.

Могу посоветовать такие приемы:
1
Качнуть ссылочный профиль.
2
Прокачать по максимуму коммерческие факторы до уровня топа.
3
Увеличить разгон по сайту ботов и пользователей (ротаторы).
4
Увеличить непоисковый трафик на сайт.
— Ну и напоследок, какие тематики сайтов не нравилось продвигать? Может быть сформировались направления (за время активной SEO-деятельности), с которыми сложно работать?
— По поводу тематик я всеяден. Но, конечно, все, что находится за гранью добра и зла (мошенники и т.п.) я просто не беру в работу. С полулегальными тематиками работал, но давно, сейчас как-то такие лиды не доходят.
Спасибо всем участникам чата и, конечно, Дмитрию за интересные ответы! Надеюсь, что они стали для вас полезны ;)

А наша рубрика продолжается! Если вы хотите увидеть в ней какого-то эксперта или поучаствовать сами, — пишите имя в комментариях под статьей и наш SMM-специалист свяжется с вами. И вступайте в наш уютный чат, чтобы быть в курсе всех новостей.

Сэкономьте время на изучении Serpstat

Хотите получить персональную демонстрацию сервиса, тестовый период или эффективные кейсы использования Serpstat?

Оставьте заявку и мы свяжемся с вами ;)

Оцените статью по 5-бальной шкале

5 из 5 на основе 10 оценок
Нашли ошибку? Выделите её и нажмите Ctrl + Enter, чтобы сообщить нам.

Поделитесь статьей с вашими друзьями

Войти Регистрация

Вы исчерпали лимит запросов.

Или email
Забыли пароль?
Или email
Back To Login

Не волнуйтесь! Напишите свой электронный адрес и мы пришлем вам новый пароль.

Вы уверены?

Awesome!

To complete your registration you need to enter your phone number

Назад

Мы отправили код подтверждения на ваш номер телефона

Your phone Resend code Осталось запросов

Что-то пошло не так.

Свяжитесь с нашей службой поддержки
Или подтвердите регистрацию с помощью Телеграм бота Перейдите по этой ссылке
Выберите один из проектов

Знакомство с сервисом

Ознакомьтесь с основными возможностями Serpstat удобным способом!

Отправьте заявку для ознакомления с сервисом и мы свяжемся с вами в кратчайшие сроки. Наш специалист предложит подходящий вариант, который может включать персональную демонстрацию, пробный период, материалы для обучения и повышения экспертизы, личную консультацию, а также комфортные условия для начала работы с Serpstat.

Имя

Email

Телефон

Будем рады вашему комментарию
Увеличить лимиты

Улучшить тариф

Экспорт недоступен для вашего тарифного плана. Вам необходимо улучшить свой тариф до Lite или выше, чтобы получить доступ к инструменту Подробнее

Зарегистрироваться

Спасибо, мы с вами свяжемся в ближайшее время

Пригласить
Просмотр Редактирование

E-mail
Сообщение
необязательно
E-mail
Сообщение
необязательно

У вас закончились лимиты

Вы достигли лимита на количество созданных проектов и больше не можете создавать новые проекты. Увеличьте лимиты или удалите существующие проекты.

Я хочу больше лимитов