Между настоящим и будущим: как искусственный интеллект меняет SEO

В общем, ИИ в корне изменил подход к поисковой оптимизации. О том, что делать и как использовать его в своих целях, поговорим ниже. Также своим мнением о нейросетях в SEO с нами поделились эксперты ;)
Кто участвовал в опросе?
- Зачем нужно машинное обучение?
- Как в алгоритмах поисковых систем применяется искусственный интеллект?
Искусственный интеллект и SEO: мнение экспертов
- Примеры использования ИИ в SEO
- Используете ли вы ИИ в своей работе? В каком формате?
- Какие инструменты для SEO на базе ИИ вы знаете?
- Как алгоритм BERT повлиял на поисковую выдачу?
- Советы по оптимизации сайта с учетом ИИ в алгоритмах поисковиков
Выводы
Что такое искусственный интеллект?
Технологии искусственного интеллекта делятся на категории, относительно их возможностей имитировать человеческие способности. Используя эти характеристики, все системы искусственного интеллекта, как существующие, так и гипотетические, делятся на 3 типа:

Зачем нужно машинное обучение?
То, как работает машина, представляет собой определенный алгоритм. Разберем понятие:

Мы сталкиваемся с проблемой→ анализируем ее→ выявляем правила→ переводим эти правила в программный код, который позволяет автоматизировать решение проблемы в заданных условиях.
Однако в определенных случаях классический подход к автоматизации терпит неудачу. Существует ряд проблем, при которых мы можем выделить и явно записать правила. Например, распознавание изображений, человеческой речи, обработка и проверка качества текстов или выявление сложных паттернов в данных.

Мы сталкиваемся с фундаментальным ограничением решения проблемы, когда не можем выделить явных правил, которым должен следовать алгоритм. И нуждаемся в новом подходе к автоматизации, отличном от классического. Здесь и приходит на помощь искусственный интеллект.
ИИ обходит стороной ошибку классического подхода. Это позволяет системе самой выявлять шаблоны и изучать неявные правила (обычно анализируя тысячи примеров), чтобы анализировать данные (изображения, звуковые файлы, тексты и т. д.) по определенным схемам (как было в примере с кошкой).

Как в алгоритмах поисковых систем применяется искусственный интеллект?
Достижения машинного обучения способствуют развитию искусственного интеллекта. Разработка этого направления велась еще с 2003 года, однако первым серьезным достижением стала программа Word2vec.
Однако не только Google использует ИИ в своих алгоритмах. В 2016 Яндекс запустил свой новый алгоритм ранжирования — Палех.

Ну и вишенкой на торте всего этого стал алгоритм Google BERT, вышедший в 2019 году.
Искусственный интеллект и SEO: мнение экспертов
Примеры использования ИИ в SEO

Этот трансформер довольно долго мне создавал статью. Сразу скажу, знания английского языка у меня примерно на среднем уровне, поэтому я переживал, что редакторы статью не одобрят. К моему удивлению редакторы, которые являются носителями языка, не поняли, что текст написан машиной.
В общем можно смело применять модель GPT-2 для создания текстов статей и комментариев на английском языке. Думаю, дальше понятно, как и для чего это можно использовать.




Технологию машинного обучения используют для разных целей. Например для реализации таких задач как:

Искусственный интеллект внедрен и в локальный поиск, и в голосовой, особое место также занимает в персонализированной выдаче. Это все влияет на то, что и как делают SEO-специалисты с проектами, это задает тренды SEO сейчас и на будущее. То есть, SEO без ИИ попросту уже не существует.
Используете ли вы ИИ в своей работе? В каком формате?

Также при помощи особых алгоритмов мы проводим анализ контент-плана.
Если кратко — это алгоритм «отсева» статей для публикации на сайте, позволяющий предположить, зайдет та или иная тема в Google и Яндекс, и с какой скоростью. Мы назвали его «метод тонкого контента». Он основан на поиске тем, которые есть в сети, хорошо ранжируются, но эти материалы устарели, слишком неполные или на них мало беклинков.

В качестве примера вы можете прочитать мою статью «Как использовать машинное обучение для анализа тем YMYL страниц».


Из их числа, например, использование искусственного интеллекта для анализа данных Google Analytics с целью оптимизации и повышения эффективности рекламных кампаний в Google Ads.

Какие инструменты для SEO на базе ИИ вы знаете?

Еще один стартап, использующий искусственный интеллект, называется frase.io. Как и у Clearscope основная задача Frase — это сбор информации для вашего контента и его оптимизация. Сервис платный, но есть бесплатная опция для тестирования.
BigML — это инструмент для машинного обучения. Имеет очень хороший бесплатный план подписки. Я его использую при проведении разного рода исследований. В общем, очень рекомендую. От вас понадобится три вещи — четко понимать, что вы делаете и что хотите получить, набор данных и базовые знания машинного обучения (для этого можно почитать блог BigML).
Вы можете более подробно узнать об интересных инструментах основанных на ИИ для вебмастеров прочитав мою статью «Искусственный интеллект — примеры использования для SEO».

Тот же Serpstat выдает статистику и потенциальный трафик на основе расчетов.

Предполагаю, что такие крупные сервисы как Serpstat, Ahrefs, Moz и т.д. также не обходятся в своей работе без использования ИИ под конкретные задачи.


На самом деле таких инструментов с каждым годом становиться все больше. Из наиболее доступных могу отметить такие сервисы:
Заказывайте бесплатную персональную демонстрацию сервиса, и наши специалисты вам все расскажут! ;)

Как алгоритм BERT повлиял на поисковую выдачу?

BERT — лучшее понимание интента пользователя, его намерения, контекста при неоднозначных запросах пользователей:


Апдейт BERT очень позитивно сказывается на сайтах, где нет проблем с простыми как кажется вещами (или они уже устранены):
Алгоритм BERT учитывает не просто ключевые слова, а и намерения пользователей. Примером стал учет порядка слов и учет частиц «не» и «без» в запросе. Алгоритму BERT я посвятил отдельный подкаст и дал свои оценки по нему. Также ИИ и его будущему я посвятил отдельный видеоролик.

BERT — это алгоритм, позволяющий Google не только «читать» ваш контент, но и понимать «контекст» употребления слов. Если BERT находит на странице много текста, в которым слова не связаны между собой естественным контекстом, он наверняка передаст сигнал Панде и другим подобным алгоритмам, оценивающим качество контента. Подробнее о BERT я писал в своем блоге.

Влияние более существенное можно отследить на результатах по некоторым типам поисковых запросов, а именно на выдаче по запросам с «длинным хвостом», голосовых, именно для них результаты более часто сформированы с использованием технологии BERT, где у пользователя есть четкий вопрос и он желает получить корректный по смыслу ответ, или же запрос «размытый» даже для понимания самим пользователем, но задача ИИ — понять и ответить путем предоставления результатов поиска, максимально удовлетворяющих запрос.

На приоритетных рынках ситуация иная. Из топа поисковой выдачи были исключены страницы, которые были в топе лишь за счет текстовой оптимизации.

Но было гораздо больше маркетинговое влияние: оптимизаторы стали чаще ссылаться на этот алгоритм и с оглядкой на него заказывать тексты.
Я считаю, что алгоритм повлиял не единоразово, и при в дальнейшем обучении выборки влияние этого алгоритма на текстовое ранжирование будет расти.

Советы по оптимизации сайта с учетом ИИ в алгоритмах поисковиков

На страницах следует использовать расширенный набор ключевых фраз. Выгрузку ключевых фраз следует проводить из разных источников. Например:

Обратите внимание на качество текстового контента на странице, а также на логику повествования и контекст использования слов между собой. На данный момент проверка на соответствие контексту самое сложное и трудоемкое занятие, потому что очень мало инструментов, которые используют для этого национальные корпуса слов. Одно из лучших, но и дорогих, решений для этого — sketchengine. Они используют корпуса слов, созданные на основе текстов Википедии. Что важно, там, в том числе, есть национальный корпус русского языка. Кто не знает, Google BERT тоже обучали на текстах Википедии.


Поэтому я рекомендую на 2020 год:


Эти советы актуальны для того, чтобы проекты работали, росли, развивались и приносили пользу, как владельцу, так и его ЦА:
ИИ — это система, которая собирает данные и обучается, а значит, что в момент, когда все хорошо, искусственный интеллект уже мог найти и начать собирать данные о проблемных местах проекта, и вопрос времени — когда эти результаты начнут работать против вас. Такое нужно предупреждать, выявлять, оперативно исправлять.

Выводы
Однако бессмысленно отрицать то, что влияние технологий, базирующихся на нейронных сетях, на сферу оптимизации велико и растет с каждым годом, по мере выхода новых алгоритмов поисковых систем и инструментов, которые могут брать на вооружение специалисты. Поэтому, держите нос по ветру, хвост пистолетом и руку на пульсе событий :D
Благодарю всех экспертов, что поделились своим мнением с нашими читателями! ❤️
Serpstat — набор инструментов для поискового маркетинга!
Находите ключевые фразы и площадки для обратных ссылок, анализируйте SEO-стратегии конкурентов, ежедневно отслеживайте позиции в выдаче, исправляйте SEO-ошибки и управляйте SEO-командами.
Набор инструментов для экономии времени на выполнение SEO-задач.
Используйте лучшие SEO инструменты
Проверка обратных ссылок
Быстрая проверка обратных ссылок вашего сайта и конкурентов
API для SEO
Получите быстро большие объемы данных используя SЕО API
Анализ конкурентов
Сделайте полный анализ сайтов конкурентов для SEO и PPC
Мониторинг позиций
Отслеживайте изменение ранжирования запросов используя мониторинг позиций ключей
Рекомендуемые статьи
Кейсы, лайфхаки, исследования и полезные статьи
Не успеваешь следить за новостями? Не беда! Наш любимый редактор подберет материалы, которые точно помогут в работе. Только полезные статьи, реальные кейсы и новости Serpstat раз в неделю. Присоединяйся к уютному комьюнити :)
Нажимая кнопку, ты соглашаешься с нашей политикой конфиденциальности.