Блог / Статьи11 октября 2019; Обновлено 21 ноября 2019

Зачем Google поменял способ обработки rel=“nofollow” и что это значит для вебмастеров?

В 2005 году Google представил общественности инструмент для пометки рекламных ссылок – rel=“nofollow”. Атрибут быстро стал популярным средством борьбы со спамом: его устанавливают для платных ссылок или пользовательских комментариев.

В течение последних 15 лет этот атрибут успешно выполнял сразу две главные функции: блокировал передачу ссылочных сигналов по определенным ссылкам, если этого хотел владелец; и помечал рекламу и спам в соответствии с рекомендациями Google, чтобы избежать санкций.

Однако, со временем его стали применять и для других задач. Так, одни вебмастера используют эту метку для внутренних ссылок на тот контент, который они хотят закрыть от индексации; другие же просто помечают ей абсолютно все внешние ссылки на своем сайте, мотивируя это нежеланием передавать свой «ссылочный вес» кому бы то ни было. В Google решили, что с этим нужно что-то делать.

В результате, 10 сентября поисковик принял интересное решение: добавил два новых атрибута для пометки ссылок, а также изменил свой подход к обработке "nofollow". В официальном блоге Google уже появилось разъяснение с ответами на самые частые вопросы о нововведении. А в сети разгорелись нешуточные дискуссии относительно новых атрибутов и их целесообразности.

Мы попытались разложить всю информацию «по полочкам» и разобраться, что делать с этим новшеством.

Что произошло?

Помимо хорошо знакомого нам атрибута rel="nofollow", была добавлена поддержка двух новых, обладающих аналогичной функцией:

  • rel="sponsored" чтобы обозначать платные ссылки, которые были созданы в рамках оплаты сотрудничества (спонсирование, реклама и т.д.);
  • rel="ugc" — чтобы помечать ссылки внутри контента, созданного пользователями (user-generated content), например, комментариев к статьям или постов на форуме.

Поисковая система теперь советует применять rel="nofollow" только тогда, когда вы хотите сослаться на страницу, но не отдавать ей рейтинг (например, если целевой сайт низкого качества). Впрочем, если вы ранее установили этот атрибут для рекламных или UGC-ссылок, то менять его на новые не обязательно.

Все три атрибута можно применять совместно: например, «рабочими» являются варианты rel="ugc sponsored" и rel="ugc nofollow". Более того, по словам представителей Google, даже если вы случайно поставите «неверный» атрибут ссылке, которая не является платной, ничего страшного не случится: система поймет это. Главное – не забывать использовать "sponsored" или "nofollow" для рекламы, иначе возможны санкции.

Важно отметить, что раньше атрибут "nofollow" учитывался поисковой системой как директива при ранжировании, сканировании и индексации страниц, то есть робот просто не переходил по такой ссылке (во всяком случае, так утверждали в Google). Теперь же подход к его обработке изменился: уже сейчас этот атрибут, равно как и два новых, учитывается лишь как подсказка при ранжировании. Это означает, что поисковая система лишь увидит сигнал, что данная ссылка, по мнению вебмастера, не должна передавать «ссылочный вес», но необязательно этот сигнал учтет.

Кроме того, атрибуты "sponsored" и "ugc" уже сейчас учитываются как подсказки при индексации и сканировании. Робот сможет переходить по ссылкам, помеченным такими сигналами. Атрибут "nofollow" начнет учитываться как подсказка в сканировании и индексации с 1 марта 2020 года. Сделано это, вероятно, для того, чтобы у вебмастеров, использовавших этот атрибут для скрытия контента от индекса, было время принять меры.

Зачем нужны такие изменения Google?

Как уверяет пользователей Google, внедрение нового алгоритма нацелено на улучшение системы обработки и анализа ссылок. Немного света на истинные причины изменений пролил сотрудник компании Гэри Илш на Webmaster Conference в Японии.

По словам Илша, на определенном этапе злоупотребление этим атрибутом стало проблемой: ссылочные сигналы важны для понимания интернета и взаимосвязей между сайтами. Из-за "nofollow", пока он работал как запрещающая директива, поисковая система недополучала значительную часть таких данных.

Теперь же, когда все три пометки будут расцениваться лишь как рекомендации, обработка ссылочных сигналов станет более полной, а два новых атрибута помогут лучше понимать происхождение ссылок. В итоге, утверждает Илш, это позволит возвращать пользователям более релевантные поисковые результаты.

Представитель Google Дэнни Салливан также дал немного пояснений в своем Twitter: он сделал акцент на том, что новые атрибуты нужны для «разделения» функций "nofollow", которые мы уже упоминали выше.

Дэнни Салливан о задачах атрибутов "nofollow", "sponsored" и "ugc"

С другой стороны, полностью доверять представителям Google в этих вопросах было бы неразумно: вполне вероятно, что компания преследует в своем нововведении и другие цели, которые не хочет раскрывать. Алгоритмы поисковой системы непрерывно меняются и совершенствуются; возможно, измененный подход к анализу атрибутов имеет более дальновидные задачи, реализацию которых мы увидим в будущем?

Не стоит исключать и вероятность того, что от нас утаили часть фактов: вспомните хотя бы историю с атрибутом rel="next | prev". В Google сначала рассказали о том, что он больше не нужендля понимания пагинации (постраничной разбивки), а затем признались, что на самом деле не используют этот параметр уже несколько лет. Что, если то же самое произошло и с nofollow?

Конечно, прямых доказательств этому нет, но косвенными свидетельствами могут послужить наши наблюдения за сайтом Arto Web Agency в Search Console. На сайте-доноре были размещены сквозные ссылки на наш ресурс; при этом лишь одна из них была открытой, а остальные – "nofollow". Тем не менее, в отчете мы видели значительное число ссылок.

Если принять эту гипотезу, то, может быть, Google превратили "nofollow" из директивы в рекомендацию уже давно, а в ходе тестирования собрали данные, которые показали необходимость ввода "sponsored" и "ugc"? Ответ на этот вопрос мы вряд ли узнаем, конечно, если им не поделятся сами сотрудники компании.

Каковы последствия для владельцев сайтов?

На первый взгляд, данное нововведение должно было бы облегчить жизнь вебмастерам. Но по факту оно вызвало целый шквал вопросов и возражений. В первую очередь владельцы сайтов задаются вопросом: зачем это нужно нам? Какой смысл отказываться от "nofollow" в пользу новых атрибутов, если вы утверждаете, что принципиальной разницы между ними нет?

Дэнни Салливан активно отвечает на подобные вопросы в Twitter; однако, четкого и полностью понятного ответа он так и не предоставил. Главный аргумент – удобство для вебмастеров, возможность лучше структурировать контент.

Дэнни Салливан говорит о новых атрибутах как о новых возможностях, а также о боязни «нагрузить» вебмастеров лишней работой

Участники диалога пытаются докопаться до истины наводящими вопросами: так, мы узнали, что целью нововведения не было ускорение сканирования крупных сайтов

Интересное мнение высказал Джуст де Волк, основатель компании Yoast. Он считает, что со стороны Googleбыло неправильнымвносить изменения в работу с rel="nofollow" в одностороннем порядке: хоть они и ввели этот атрибут в обиход первыми в мире, но все же на сегодняшний день его поддерживают и другие поисковые системы (Bing, Яндекс). Впрочем, представители Bing тоже отреагировали: как оказалось, они всегда использовали "nofollow" именно как подсказку, а не как директиву.

Хоть в Google и заверяют, что нововведение – это не обязательное руководство к действию, а лишь рекомендация, но де Волк предполагает, что большинство вебмастеров будут стараться «угодить» поисковику, т.к. тот является лидером на рынке.

Денни Салливан и Гэри Илш уверяют, что внедрение новых атрибутов является добровольным, и говорят, что ни в коем случае не хотели добавить забот вебмастерам. Несмотря на это, владельцы сайтов все же обеспокоены тем, что у технических специалистов прибавится лишней работы, эффективность которой остается под вопросом. Многие посетители форума технической поддержки Google даже уверены, что это новшество — лишь способ понизить сайты в рейтинге и уловка поисковика для монетизации контента.

Что нужно предпринять владельцам сайтов?

Вы можете применять старый атрибут и дальше, если его добавление настроено на вашем сайте автоматически, но желательно постепенно переходить на rel="sponsored". Для пометки рекламных или партнерских линков подходят оба варианта. Также у вас есть возможность использовать два атрибута одновременно.

Напомнимтакже, что с марта 2020 года rel="nofollow" будет обрабатываться только как рекомендация при сканировании сайтов. Если сейчас вы блокируете страницы от индексации только с помощью nofollow, то стоит перейти на другие, более надежные инструменты (например, через файл robots.txt или мета-теги).

Таким образом, изменения в инструментах обработки рекламных или пользовательских ссылок скорее нужны самой компании Google, чем вебмастерам. Мы пока не до конца понимаем все цели этих нововведений, однако весьма вероятно, что они действительно помогут поисковику лучше обрабатывать ссылочные сигналы и выдавать более релевантный контент.

Для владельцев сайтов пока что нет причин для беспокойства. Продолжите ли вы пользоваться "nofollow", или перейдете на "sponsored" и "ugc" – главное не забывать помечать ими те ссылки, которые могут быть восприняты как «спамные». По крайней мере, до тех пор, пока Google не анонсировал чего-то нового в этой области.

Нужна помощь по SEO?

Мы в Arto готовы помочь! Наше агентство предоставляет улуги SEO аудита, консультаций и продвижения сайтов как молодого бизнеса, так и крупных компаний. Наш подход - максимальная открытость и ответственность. Если у вас есть запрос на поисковую оптимизацию, свяжитесь с нами, нажав на кнопку ниже.
Николай Ашпин
SEO, web-researcher

Узнавайте о важном первыми!

Учебные материалы, важные новости, обзоры. Мы пишем вам тогда, когда действительно есть что сказать
КОММЕНТАРИИ
КОММЕНТИРОВАТЬ
ВОЙТИ
  • Facebook
  • Twitter
ЭТОТ САЙТ ИСПОЛЬЗУЕТ COOKIES
Мы используем cookies для анализа трафика, обеспечения функций социальных сетей и работы системы комментирования на сайте. Список устанавливаемых cookies находится на этой странице. Согласны ли вы на установку cookie?