Мы запустили рейтинг зарплат интернет-маркетологов! Прими участие в анонимном опросе.

Закрыть

SEO

– Читать 15 минут –

27 сентября 2017

Прочитать позже

Поиск дроп-доменов: как найти истекшие домены и выявить потенциальные дропы

Дмитрий Мазурян

SEO-специалист в Netpeak Agency

Каждый, кто занимается продвижением в западных странах знает, что использование истекшего домена (дропа) зачастую лучше, чем запуск сайта/блога/саттелита на новом девственном домене.

Как найти будущие дропы и выявить чужие свежие домены? Сегодня я расскажу вам как это сделать и поделюсь своей методикой, основанной на данных из Serpstat.

Немного теории

Что такое дроп-домен, сетка сайтов и сателлиты?

Истекший домен (или дроп-домен) — домен, которым уже пользовались, но владелец решил его не продлевать. После истечения срока аренды такие домены доступны для регистрации любым человеком.

Private Blog Network (PBN) — сетка блогов одного владельца, которая используется для занятия фрагмента ниши и является частью стратегии по продвижению основного проекта или проектов. Чаще одна сетка посвящена лишь одной тематике.

Сателлиты — небольшие, обычно 4-10 страничные сайты, посвященные определенной тематике. В отличии от PBN они больше ориентированы на привлечение целевого трафика на основные проекты, но ценность их аналогично невысока.

В отличие от СНГ, в западных странах нет таких разнообразных возможностей по покупке ссылок. Поэтому специалисты прибегают к тому, что создают целые сетки сайтов, ссылки из которых помогают в продвижении основных проектов. В этом плане хорошие «дропнутые» домены лучше новых, т.к. у них есть история, могут уже быть обратные ссылки и даже доверие поисковых систем.

Серая шляпа оптимизации: что эксперты говорят о PBN?

Поиск доменов

Какими бывают методы поиска доменов

Одним из распространённых способов поиска дропов является использование сервисов вроде ExpiredDomains.net и аукционов вроде GoDaddy. Благодаря этим сервисам можно зарегистрировать домен, подходящий под ваши цели. Но задача поиска по-настоящему хорошего дропа порой подобна поиску иголки в стоге сена.

Метод #1

Легкий

Самый простой метод — это поиск домена на Expired Domains. Вам нужно отфильтровать домены по включению определенных слов и затем отфильтровать по количеству входящих ссылок по MajesticSeo.

Каждый из полученного множества доменов желательно еще проверить на содержимое вебархива, базовые пузомерки типа Moz Domain Authority, Ahrefs Domain Ranking, SM*Trust … и проверить ссылочную массу, проверить доменное имя и его значимость. Ссылки можно изучить прямо в ссылочном модуле Serpstat.

Climbers on Mount Rainier

Полезно

Наглядно эта методика описана в свежем докладе Виктора Карпенко

Кроме того, я рекомендую смотреть историю трафика на домен по SimilarWeb и видимости по Serpstat. В API Serpstat существует полезная функция domain_history, которая выводит всю историю показателей домена в сервисе. Насколько мне известно, базы для США и Великобритании ведутся уже несколько лет и вероятность, что по искомому домену будет информация — очень велика.

Возьмем, например, домен insurance35.com. На момент написания статьи он был свободен, что подтверждает скриншот с Google Domains:

Определяем свободный домен с помощью Google Domains

В текущий момент Serpstat не видит его в поиске (оно и понятно, ведь домен уже вылетел из выдачи), но функция domain_history показывает, что еще в июле сайт был замечен по 40 фразам. Вот так это выглядит, если зайти по адресу: http://api.serpstat.com/v3/domain_history?query=insurance35.com&se=g_us&token={ВАШ ТОКЕН}

Дропы, которые участвовали в выдаче — это очень хорошо. Велика вероятность, что и ваши сайты на таких доменах также попадут в выдачу и будут давать трафик. По моему мнению, такие дропы значительно лучше, чем домены с большим числом обратных ссылок и высокими показателями Moz Domain Rank, Sepstat TrustFlow и т. д., ведь поисковики уже подтвердили доверие к ним.

Метод #2

Изучение выдачи

Изучение выдачи — одна из основ современного SEO. Эта работа позволяет узнать методы работы конкурентов и сформировать свою стратегию по продвижению. Кроме этого, изучение выдачи позволяет найти дропы, которые еще не выпали из поиска и сайты, которые могут освободится в ближайшее время.

Чтобы получить эту информацию достаточно выгрузить все домены из топа (топ-10, топ-20 … топ-100, каждый сам определяет для себя) и по Whois проверить дату окончания аренды домена. Одного запроса в рамках ниши недостаточно, ведь даже по слегка измененной фразе выдача будет другой.

Возьмем, например, узкую нишу «Michael Kors crossbody bags». В топ-100 американской выдачи Google по фразе «michael kors crossbody bag» 95 уникальных доменов. По фразе «Michael Kors crossbody bags» — 98, из которых 36 отсутствуют в первом множестве. А по «black michael kors crossbody bag» еще 39 новых доменов.

Итого по трем похожим фразам в топ-100 находится 170 уникальных доменов. Руками подбирать фразы и доставать домены из выдачи очень долго. Тут поможет Serpstat. В нем очень легко можно достать множество фраз даже для очень узкой ниши. В случае Michael Kors Crossbody Bags в американской базе нашлось аж 65 фраз. Для каждой фразы можно взять топ и скопировать домены. Даже не нужно заходить в Google.

Для полученного множества доменов нужно получить данные WHOIS и определить дату регистрации и окончания аренды. Для этого есть куча сервисов и софта.

Определение даты регистрации домена в whois

Например, Netpeak Checker — удобный инструмент, который предоставляет такие данные.

Но для меня даже это сложно. Для автоматизации этого процесса я использую API Serpstat. В результате написал небольшой скрипт, который достает домены из ниши и определяет зарегистрирован ли домен, если зарегистрирован — то дату начала и окончания регистрации домена.

Метод #3

Изучение выдачи с помощью API Serpstat

Благодаря методам domain_keywords, url_keywords и keywords достаются фразы из базы Serpstat для нужной ниши. Затем благодаря методу keyword_top определяются домены из топ-100 по фразе и формируется общее множество уникальных доменов для ниши. При помощи старенькой, но бесплатной библиотеки phpWhois, для всех доменов из этого множества анализируется whois и определяется зарегистрирован ли он и даты регистрации/окончания.

Как это выглядит? Изначально нужно заполнить ряд полей, чтобы скрипт собрал нужные данные. Формы выглядят следующим образом:

Пройдусь подробнее по полям.

Ввод — фраза, домен или страница, для которой будут доставаться фразы из базы Serpstat.
Тип ввода — тут выбирается с каким типом ввода будет работать скрипт. От этого зависит какая функция API Serpstat будет задействована. Например, для ввода «amazon.com» при выборе разных типов ввода будут получены разные фразы для анализа.
Поисковая система — поисковик, для которого будет проводиться анализ. Например, для американского Google нужно установить значение g_us. Весь перечень доступных поисковых систем можно найти на странице https://serpstat.com/ru/stat/.
Лимит поиска — максимальное число фраз из органической выдачи, которые будут участвовать в анализе.
Размер страницы — параметр необходимый для пагинации при работе с API Serpstat, т.к. функции keywords, url_keywords и domain_keywords может выдавать максимум 1000 фраз. Если у вас стоит лимит ключей меньше 1000, то рекомендую использовать размер страницы такой же, как лимит поиска.
Макс. частотность — максимальная частота фраз из обоих баз, которые будут участвовать в анализе. Если нужны только НЧ, то можно установить 20. Например, для поиска блогов и саттелитов я устанавливаю максимальную частотность не больше 80.
API token — сюда нужно ввести свой ключ для API. Его можно узнать на странице своего профиля в сервисе.
Функция — данный скрипт реализует ряд функций:

- Поиск дропов по Whois — формируется таблица доменов из ниши с данными из Whois.

- Просто вывести домены — выводятся уникальные домены из выдачи в рамках анализируемой ниши. Нужно, если вы планируете с ними проводить другие работы.

- Поиск форумов — слегка усовершенствованный поисковик тематических форумов из моего летнего поста про Семь полезных кейсов по использованию API Serpstat + скрипты

В будущем, вероятно появятся и другие функции.

Обращу ваше внимание на функции «Поиск дропов по Whois». После ввода всех входных параметров и нажатия на единственную рыжую кнопку начнется работа. Через 5-15 минут на странице будет выведена следующая таблица:

В этой таблице есть несколько столбцов, на которых я остановлюсь более подробно:

Домен — имя домена из анализируемого множества в рамках рассматриваемой ниши.
Дата регистрации — собственно дата регистрации домена. Обычно в Whois это строка «created: ». Если домен не зарегистрирован будет отображено слово «dead».
Дата окончания — дата, до которой в данный момент зарегистрирован домен. В Whois это обычно строка «expires: ». Если домен не зарегистрирован будет отображено слово «dead».
Фраза — первая фраза из рассматриваемых, для которой был найден этот домен.
Позиция — позиция домена в органической выдаче по указанной фразе.
Всего фраз — число фраз из рассматриваемого множества, для которого данный домен был замечен в топ-100 органической выдачи.

Важно!

В связи с тем, что библиотеке phpWhois уже 5 лет, она далеко не всегда достает Whois для домена. Если не получилось достать, то в полях «Дата регистрации» и «Дата окончания» будет красоваться слово «none». К сожалению, в данный момент обычно 10-30% доменов получают «none». Это одна из причин, по которой существует функция получения просто списка доменов. Их можно копировать в другой софт или сервисы, которые значительно лучше достают Whois для доменов.

Как уже упоминалось для дропнутых доменов в столбцах с датами выводится слово dead. Для рассмотренного в начале примера с фразой cheap car insurance скрипт нашел сразу три свободных домена: carinsurancefloridacheap.com, lowcostautoinsuranceflorida.com и cheapfloridacarinsurance.net.

Если проверить через name.com, то все три домена реально свободны и их можно зарегистрировать хоть прямо сейчас.

К слову, эти три домена присутствуют в базе Expired Domains, но мне удавалось находить дропы, которых не было в их базе. Наилучшим вариантом из этой троицы является lowcostautoinsuranceflorida.com.

Несмотря на то, что на домен ссылается на всего 7 слабеньких страниц, он ранжировался по более, чем сорока фразам в американском Google. Если бы я занимался автострахованием в Флориде, то, пожалуй, задумался о регистрации данного домена и запуска на нем небольшого саттелита.

Благодаря тому, что в Serpstat очень большие базы для множества регионов и некоторой задержке в обновлении топов, этим методом можно находить хорошие дропы, даже в очень узких нишах, и улучшать свои сетки блогов и саттелитов, и достигать топов в самых конкурентных тематиках.

Бонус

Как найти домены, которые в будущем могут стать дропами

С данной методикой я работаю уже около полугода. В моем случае, нахождение дропов — скорее побочные бонусы. Я больше внимания уделяю поиску будущих дропов, а также изучению новых игроков.

Изучение # 1

Потенциальные дропы

Свободные домены — это очень хорошо. Но из-за продолжительного простоя они могут потерять все свои положительные качества. Из-за этого создание сайта на дропе всегда игра в рулетку. Есть довольно большая вероятность, что он не выстрелит и потраченные силу уйдут почти в никуда. Поэтому куда большее предпочтение я даю доменам, которые только освободились.

Благодаря, описанному выше методу я заранее нахожу домены, которые могут освободится в ближайшие несколько месяцев. Ставлю себе напоминание на нужную дату и стараюсь оперативно зарегистрировать понравившиеся домены, быстро восстановить и придумать стратегию дальнейшего развития. На самом деле, регулярно освобождается очень много хороших доменов, владельцы которых не придумали что с ними делать или не смогли выжать достаточно пользы от них.

Такие домены можно находить моим скриптом. После выполнения анализа ниши под таблицей появится ссылка на csv-файл с результатом. Его можно открыть любым редактором таблиц, например, Microsoft Excel и отсортировать результат по дате окончания. Выглядит это следующим образом:

Lомены, которые могут освободится в ближайшие несколько месяцев

Для этих доменов я смотрю стандартный набор параметров:

Фразы из Serpstat, по которым ранжируется сайт и позиции.
Трафик, доля поискового трафика и регионы по Similarweb.
Числовые показатели ссылок и анкорлист. Это теперь можно смотреть и прямо в Serpstat.
Показатели домена Ahrefs DR, SM*Trust, Moz DA, Majestic TF/CF.

Если все нравится, надеюсь, что домен не будет продлен и стараюсь его зарегистрировать. Перед регистрацией обязательно перепроверяю параметры домена (иногда за пару месяцев картина может сильно поменяться).

Перехватить такие домены получается редко, но получается. Главная их прелесть в том, что после оперативного восстановления они почти сразу начинают давать хоть какой-то трафик. А если еще добавить щепотку магии SEO, то получается даже выйти в топ-10 по весьма неплохим СЧ.

Советую не распускать слюни на домены, дата регистрации которых была более пяти лет назад. С вероятностью 99% их продлят или выкупят более умелые специалисты.

Изучение #2

Выдача

Отдельного внимания заслуживают сайты, домены которых зарегистрированы совсем недавно (меньше года). Если их нашел этот скрипт, значит они уже как-то ранжируются. Среди таких доменов можно найти очень интересные экземпляры. Детальное их изучение поможет перенять лучшие «фишки» и ключики к топу. Рассмотрим пример для ниши «g-shock» в американской выдаче Google.

Cайты, домены которых зарегистрированы совсем недавно (меньше года)

Возьмем к примеру домен, militarywatchguru.com. Зарегистрирован он в июне 2016 года, т.е. всего 3 месяца назад. В веб-архиве нет истории, whois.domaintools.com тоже ничего не говорит о прошлом whois домена. Т.е. есть все основания, что до лета сего года никто не использовал данный домен. Теперь взглянем на него достижения по Serpstat.

Как видим, домену всего три месяца, а у него уже есть неплохие позиции. Даже после проверки позиций альтернативным сервисом подтверждаются позиции домена в американской выдаче.

Я могу привести еще очень много примеров. Главное, благодаря такому использованию Serpstat можно выявлять удачные примеры эффективного продвижения, изучение которых может показать новые «фишки» и повысить шансы выйти в топ со своими проектами.

Заключение

Описанные выше методы подходят не только для продвижения в западных странах. В СНГ пока еще не часто прибегают к подобным стратегиям, но даже в наших нишах можно найти «вкусные» текущие и потенциальные дропы, а также выявить свеженькие сайты в топах, особенно Яндекса.

По традиции делюсь с вами своим скриптом. На сайте моего худо-блога можно воспользоваться онлайн-версией или скачать архив с исходниками. Т.к. онлайн версия на обычном вебхостинге и парсинг whois работает через раз, рекомендую скачать исходник и установить у себя на сервере или виртуалке. Так будет значительно надежнее.

Онлайн версия: http://mz.kiev.ua/tools/serpstat-api-funcs.php

Исходник: http://mz.kiev.ua/tools/serpstat-api-funcs-08092016.rar

Надеюсь, эта статья была для вас полезной и позволила узнать что-то новое. Не только про то, как использовать Serpstat по полной, но и в вопросе анализа выдачи и поиска хороших освобождающихся доменов.

Если у вас возникают вопросы, то пишите в комментариях или мне в Facebook.

P.S. Если знаете уже готовую библиотеку по более стабильному парсингу Whois или какой-то бесплатный API — обязательно пишите.

Сэкономьте время на изучении Serpstat

Хотите получить персональную демонстрацию сервиса, тестовый период или эффективные кейсы использования Serpstat?

Оставьте заявку и мы свяжемся с вами ;)

Оцените статью по 5-бальной шкале

4.24 из 5 на основе 83 оценок

Нашли ошибку? Выделите её и нажмите Ctrl + Enter, чтобы сообщить нам.

Рекомендуемые статьи

SEO

Подробная инструкция по редиректам: когда и как их использовать

Евгений Заяц 20 сент. 2017 г.

46980

SEO

Дайджест #32: Как узнать стратегию конкурентов по внешнему контент-маркетингу и для чего это нужно

15 сент. 2017 г.

6490

SEO

Как найти площадки для размещения естественных ссылок

Alexey Shtarev 13 сент. 2017 г.

36337

Roman Efremenko

Дмитрий, спасибо за статью. Наконец-то про дропы и сетки для смертных написано, а не для SEOшников с 20-летним стажем.

Станислав Кучер

Очень интересно. Когда то занимался таким. cDomains программкой парсил домены свободность :)

www.i-vorota.com.ua Ай-ворота

Прикольно, получаеться что иногда дешевле дроп купить, чем ссылку

Евгений Atom

Сегодня в завтрашний день могут смотреть не только лишь все?)
https://uploads.disquscdn.c...

Анатолий Шпиц

полезно.
правда в наших реалиях проще купить на бирже ссылку за 3-6 тыс рублей, чем дрочиться с поиском дропа, покупкой домена, его восстановлением и т.д.
да и эффект от ссылки за 3-6 тыс будет больше (трастовые, тицовые и с посещалкой от 10 до 100к). Если конечно в команде есть негритята, которые работают за 1 доллар в час, еще можно подумать о такой стратегии)))

Юрий Гринько

Что я не так делаю?
У меня после запуска скрипта пустой экран, в то же самое время в моем профиле я вижу что количество запросов по API уменьшилось и вижу запросы которые обрабатывал скрипт.

Dmitriy Mazuryan

Такое есть. Хостинг, где лежит скрипт снизил лимит обработки. Настоятельно рекомендую скачать исходник и запускать скрипт на своем сервере, где нет ограничений по времени исполнения. Для теста скрипта на моем хостинге в поля "лимит поиска" и "размер страницы" лучше ставить маленькие числа. У меня с такими настройками сработало - http://images.k-hi.net/mazy...

Юрий Гринько

Поставил у себя, все работает. Спасибо!