Как массово находить дропнутые домены. Находим освобождённые домены которые ранжируются выше в выдачи
Обратите внимание! На момент написания статьи Serpstat поддерживал версию API v3 с GET-параметрами, но используется обновленная версия API v4, которая работает с POST-запросами.
Отличие методов GET от POST лежит в способе передачи данных. Запрос GET передает данные в URL, а запрос POST – в теле запроса.
Это различие описывает характеристики способов и особенности запросов для использования того либо другого способа.
Пример из кейса можно рассматривать как демонстрацию возможностей для написания собственных скриптов или использования существующих и получения данных в соответствии с вашими задачами.
Ознакомиться с актуальными APi-методами и синтаксисом можно здесь. serpstat.com/ru/api/
Пример запроса с POST-методом:
Отличие методов GET от POST лежит в способе передачи данных. Запрос GET передает данные в URL, а запрос POST – в теле запроса.
Это различие описывает характеристики способов и особенности запросов для использования того либо другого способа.
Пример из кейса можно рассматривать как демонстрацию возможностей для написания собственных скриптов или использования существующих и получения данных в соответствии с вашими задачами.
Ознакомиться с актуальными APi-методами и синтаксисом можно здесь. serpstat.com/ru/api/
Пример запроса с POST-методом:
{
"id": "1",
"method": "SerpstatDomainProcedure.getDomainsInfo",
"params": {
"domains": ["nike.com", "adidas.com"],
"se": "g_us"
}
}
Анастасия Сотула
Редактор блога Serpstat
Знаете ли вы, что API Serpstat можно использовать не только для быстрого анализа больших объемов данных, но и, чтобы строить SEO-гипотизы и анализировать нишу.
Данная статья построена на основе доклада Дмитрия Мазуряна — Senior SEO at Tonti Laguna&Netpeak Group. Вы узнаете, что такое анализ топов, как и зачем находить дроп-домены, определять узкие ниши и как автоматизировать все эти процессы. Поехали!
Данная статья построена на основе доклада Дмитрия Мазуряна — Senior SEO at Tonti Laguna&Netpeak Group. Вы узнаете, что такое анализ топов, как и зачем находить дроп-домены, определять узкие ниши и как автоматизировать все эти процессы. Поехали!
Содержание
- Зачем нужно анализировать топы?
- Как найти дропы, которые ранжировались в вашей выдаче?
- Как найти сайты, которые добиваются успеха в нише?
- Как определить узкие ниши по конкретным сайтам?
- Как разбить семантику на группы и получить рекомендации по оптимизации текста автоматически?
Подытожим
Зачем нужно анализировать топы?
Мы провели анализ факторов ранжирования и посмотрели, насколько разнообразны результаты поиска для разных ниш. Допустим, если рассмотреть нишу, связанную с автомобильными шинами, то можно встретить новый домен в топ-3 каждый раз при каждом анализе.
Результаты очень разнообразны: это происходит потому, что ниша разделена на субниши, поэтому невозможно увидеть все это разнообразие доменов, если посмотреть только на топ-10 или топ-100. Необходимо прибегать к анализу топов и рассматривать сотни и тысячи доменов.
Благодаря этому анализу можно узнать больше о конкурентах и выявить закономерности распределения доменов в выдаче. Также можно получить информацию о разнице между результатами поиска разных ключевых слов в вашей нише.
Результаты очень разнообразны: это происходит потому, что ниша разделена на субниши, поэтому невозможно увидеть все это разнообразие доменов, если посмотреть только на топ-10 или топ-100. Необходимо прибегать к анализу топов и рассматривать сотни и тысячи доменов.
Благодаря этому анализу можно узнать больше о конкурентах и выявить закономерности распределения доменов в выдаче. Также можно получить информацию о разнице между результатами поиска разных ключевых слов в вашей нише.
Как найти дропы, которые ранжировались в вашей выдаче?
Не секрет, что есть домены, которые забыли продлить или забросили. Среди этих доменов много функциональных; многие из них хорошо ранжировались по своим ключам и имели хорошее содержание. Согласно справке Google, домен не сразу выпадает из индекса после закрытия сайта. Serpstat отслеживает такие сайты.
Чем хороши такие домены?
1
Это домены с потенциалом.
2
У них уже есть какой-то траст от Google.
3
Им уже была присвоена определенная тематика.
4
После восстановления они могут вернуть позиции и давать трафик.
Как найти дропы?
1
Берем всю семантику ниши.
2
Проверяем домены в выдаче на занятость.
Сразу предупреждаем, что ручной подход займет вечность. Поэтому лучше автоматизировать данную задачу с помощью API. Сделать это можно, используя скрипт, написанный на базе API Serpstat. Почему именно Serpstat? API сервиса обладает рядом преимуществ: быстрая выгрузка данных, простота в использовании (есть дополнение для Google таблиц и API-консоль, которая поможет даже новичку), цена (API доступно с тарифа Lite, где пользователю предоставляется 100К запросов).
Скачать скрипт можно по ссылке: http://mz.kiev.ua/tools/serpstat-api-funcs.rar (скопируйте ссылку и вставьте в строку поиска, файл со скриптом скачается к вам на компьютер).
Скачать скрипт можно по ссылке: http://mz.kiev.ua/tools/serpstat-api-funcs.rar (скопируйте ссылку и вставьте в строку поиска, файл со скриптом скачается к вам на компьютер).
Как это работает?
В скрипте есть функция «поиск дропов по whois».
Мы вводим ключ, и скрипт собирает все запросы, которые находятся в базе данных Serpstat для этого ключа через API. Сервис анализирует топы, собирает домены и уже автоматически проверяет whois для этих доменов и формирует таблицу, которая включает:
Мы вводим ключ, и скрипт собирает все запросы, которые находятся в базе данных Serpstat для этого ключа через API. Сервис анализирует топы, собирает домены и уже автоматически проверяет whois для этих доменов и формирует таблицу, которая включает:
домен;
дату регистрации;
дату окончания регистрации;
ключевое слово, по которому домен был впервые найден;
позицию по этой фразе;
количество ключевых фраз домена.
Истекшие домены выделены обозначены маркером «dead».
Но не все, найденные таким образом, домены одинаково полезны.
Исключения:
Но не все, найденные таким образом, домены одинаково полезны.
Исключения:
заспамленные домены;
дорвеи;
псевдо-поисковики и галереи.
Чтобы исключить такие домены, мы проверяем:
2
Динамику видимости и трафика через Serpstat. Если трафик и видимость начали падать раньше, чем истекает срок действия домена, то можно предположить, что у домена есть проблемы, и его лучше исключить.
3
Cсылки — смотрим обратные ссылки для проверки на спам.
Пример плохого дропа: gta5hackcheats.com
Трафик и видимость начали падать еще до истечения срока годности.
Трафик и видимость начали падать еще до истечения срока годности.
Как найти сайты, которые добиваются успеха в нише?
Зачем нам нужна эта информация?
Их главное преимущество в том, что это новые сайты, которые за короткое время преуспевают в своей нише. Если вы проанализируете их подробно, то сможете найти методы, которые они использовали для достижения результата. Используя их опыт, можно войти в эту нишу и добиться большего успеха, чем они. Кроме того, можно определить конкуренцию в нише: если в этой нише много новых сайтов, то конкуренция там низкая, и довольно высокие шансы добиться успеха.
Как найти такие сайты?
Можно искать такие сайты автоматически, используя скрипт с той же функцией «поиск дропов по whois»: в этом отчете есть столбец «Дата регистрации домена».
1
Загружаем файл CSV, открываем его в Google таблицах.
2
Сортируем по дате регистрации.
3
Отфильтруем домены, которые были зарегистрированы за последний год (в конкурентных темах сайту нужно больше времени для успеха).
Что мы проверяем после получения списка
таких сайтов?
таких сайтов?
Трафик и видимость. Отделяем успешные домены от лузеров.
Дату регистрации. Ошибки редкость, но лучше перепроверить.
Склейку со старым сайтом. Новый домен не обязательно новый сайт. Если домены слились за последние 3 месяца, то это легко определить, проверив обратные ссылки.
Контент. Проверьте структуру, объем, динамику, постарайтесь понять стратегию разработки контента сайта. Анализируя контент, посмотрите на ключевые слова, которые были использованы для формирования контента. Такие новички в конкурентных темах уже разработали семантику, и мы можем использовать их лучшие практики для расширения нашей собственной семантики.
Историю домена веб-архива. Проверьте, был ли это новый домен или удаление.
Пример успешного сайта: essayonquotes.com
Если у вас большой проект, вы можете быстрее анализировать топы, сервисы парсинга Serpstat:
Как определить узкие ниши по конкретным сайтам?
Большинство экспертов привыкли создавать ниши с помощью обработки семантики. Мы берем большой пул запросов и делим его на группы. Но вы также можете пойти противоположным путем — найти сайты, которые работают с небольшими нишами.
В чем польза такого метода?
Автоматический поиск узких ниш, с которыми кто-то уже работает.
Расширение семантики с использованием контента конкурентов.
Анализ потенциальной ниши (примерный объем трафика, количество конверсий по партнерской программе, количество продаж).
Существует большое количество ключевых фраз и огромное количество сайтов, которые можно найти в топе по этим ключам. Некоторые сайты плотно охватывают эту семантику, некоторые частично, а некоторые покрывают только часть семантики, и, в то же время, у них нет другой семантики — это сайты, которые работают с очень узкими нишами.
Как это работает?
Скрипт имеет функцию поиска сайтов в небольшой нише. Это работает так:
1
Собираем семантику по ключевому слову.
2
Собираем домены их топов.
3
Для каждого домена скрипт определяет силу связи с полученной семантикой и 6 словами, которые чаще всего встречаются в поисковых фразах, по которым этот домен ранжируется.
Ниже можно увидеть таблицу для анализа ниши биткойнов. Некоторые сайты здесь работают с узкими нишами.
Например, bitcoinexchangeguide.com
Можно найти сайты, которые работают с микро-нишами практически в каждой нише. Почему их стоит искать? Часто они выбирают направление, потому что оно не самое конкурентоспособное, и ведущие игроки об этом забывают. Найдя такие сайты, можно увидеть объем трафика и потенциал, чтобы попытаться занять небольшие ниши. Чтобы это сделать, можно воспользоваться скриптом на базе API Serpstat.
Как разбить семантику на группы и получить рекомендации по оптимизации текста автоматически?
В дополнение к скрипту можно использовать инструмент Кластеризации и Текстовой аналитики.
Вы получаете:
Вы получаете:
Усовершенствованное разделение большого объема семантики на группы.
Автоматический анализ текста всех страниц топа по запросам из кластера.
Рекомендации по оптимизации текста страницы в соответствии с характеристиками ниши.
Как повысить текстовую релевантность страниц сайта: инструмент Serpstat «Текстовая Аналитика»
Как работает текстовая аналитика?
1
Разделяет топы URL-ов в выдаче по заданным поисковым запросам на группы, например: видеозаписи, информационные статьи, каталоги, коммерческие страницы и т.д и определяет к какой группе из них наиболее близок целевой URL.
2
Учитывается только содержимое текстовых блоков (комментарии, тексты из нижнего колонтитула и заголовка пропускаются).
3
Учитываются только сайты из категории вашего сайта.
4
В результате сложной обработки определяются наиболее важные слова, использование которых естественно в нише.
5
На основе анализа страниц Текстовая аналитика дает рекомендации по улучшению текстовой составляющей нашей страницы и увеличения релевантности страницы по отношению к фразам: h1, основного текста, объема текста на основе анализа содержимого страниц вашего сайта.
Вы можете использовать эти инструменты, даже если ваш сайт еще не находится в нише, и вы только планируете в нее войти. Возьмите лидера, который занимает эту нишу, и проведите анализ текста на основе его сайта. В результате вы получите рекомендации, которые позволят вам писать тексты лучше, чем у конкурента.
Бонусный метод для тех, кто дочитал до конца :D
Анализ важности ключевых фраз в нише и массовые проверки
Способ #1
Делаем разбор важности слов в нише. По API выгружается несколько тысяч фраз и разбираются на слова. В итоге по каждому слову получаем две метрики: количество фраз со словом и суммарная частотность фраз со словом.
Здесь скрипта нет. Все это можно сделать через Google Sheets.
Заготовок описания тоже нет. Просто берем выгрузку ключей по фразе. Например 40к ключей. Ключи делим на слова. Например ключ «убойная водка» — это два слова «убойная» и «водка».
С помощью базовых возможностей Google Sheets можно получить список таких слов, и для каждого посчитать количество попаданий в выгруженные 40к ключей и суммарную частотность в них. Так можно выделить основные слова, которые встречаются с главным словом, например, «водка».
Это отличный способ, который помогает при быстром и ленивом разборе темы ;)
Способ #1
Делаем разбор важности слов в нише. По API выгружается несколько тысяч фраз и разбираются на слова. В итоге по каждому слову получаем две метрики: количество фраз со словом и суммарная частотность фраз со словом.
Здесь скрипта нет. Все это можно сделать через Google Sheets.
Заготовок описания тоже нет. Просто берем выгрузку ключей по фразе. Например 40к ключей. Ключи делим на слова. Например ключ «убойная водка» — это два слова «убойная» и «водка».
С помощью базовых возможностей Google Sheets можно получить список таких слов, и для каждого посчитать количество попаданий в выгруженные 40к ключей и суммарную частотность в них. Так можно выделить основные слова, которые встречаются с главным словом, например, «водка».
Это отличный способ, который помогает при быстром и ленивом разборе темы ;)
Пакетный анализ данных в один клик: дополнение Serpstat Batch Analysis для Google Spreadsheets
Способ #2
Массовые проверки количества фраз у страниц, количествава фраз в топ-10 у доменов, количества фраз с фильтром у доменов/страниц и тд. В общем, все массовое чего нет в интерфейсе или чекере. По сути это массовый анализ, который есть в интерфейсе для обработки доменов, но отсутствует для отдельных страниц
Массовые проверки количества фраз у страниц, количествава фраз в топ-10 у доменов, количества фраз с фильтром у доменов/страниц и тд. В общем, все массовое чего нет в интерфейсе или чекере. По сути это массовый анализ, который есть в интерфейсе для обработки доменов, но отсутствует для отдельных страниц
Подытожим
Массовый анализ топ-ов позволяет получить много полезной информации:
1
Хорошие дропы с потенциалом.
2
Крутые фишки успешных новичков, чтобы всегда быть в тренде продвижения.
3
Сайты, которые работают с узкими нишами и раскрывают их потенциал.
4
Возможность разделить ниши по топам и сразу получить рекомендации по оптимизации страниц.
Ну и в качестве бонуса вы получаете скрипт для автоматизации любого анализа.
Serpstat — набор инструментов для поискового маркетинга!
Находите ключевые фразы и площадки для обратных ссылок, анализируйте SEO-стратегии конкурентов, ежедневно отслеживайте позиции в выдаче, исправляйте SEO-ошибки и управляйте SEO-командами.
Набор инструментов для экономии времени на выполнение SEO-задач.
Нашли ошибку? Выделите её и нажмите Ctrl + Enter, чтобы сообщить нам.
Используйте лучшие SEO инструменты
Проверка обратных ссылок
Быстрая проверка обратных ссылок вашего сайта и конкурентов
API для SEO
Получите быстро большие объемы данных используя SЕО API
Анализ конкурентов
Сделайте полный анализ сайтов конкурентов для SEO и PPC
Мониторинг позиций
Отслеживайте изменение ранжирования запросов используя мониторинг позиций ключей
Рекомендуемые статьи
Кейсы, лайфхаки, исследования и полезные статьи
Не успеваешь следить за новостями? Не беда! Наш любимый редактор подберет материалы, которые точно помогут в работе. Только полезные статьи, реальные кейсы и новости Serpstat раз в неделю. Присоединяйся к уютному комьюнити :)
Нажимая кнопку, ты соглашаешься с нашей политикой конфиденциальности.