Google расширил рекомендации по борьбе со спамом в пользовательском контенте, включив в них платформы и инструменты, где пользователи могут публиковать общие страницы, сгенерированный контент и веб-приложения. Изменения указывают, что такие сервисы могут столкнуться с мерами со стороны поиска, если опубликованные пользователями материалы нарушают правила Google.
Обновления затрагивают не только традиционные формы пользовательского контента, например открытые комментарии, но и сервисы для публикации, совместной работы и создания страниц. Google также добавил рекомендации по предотвращению злоупотреблений и отслеживанию признаков, которые могут предшествовать ручным мерам.
Платформы для публикации включены в рекомендации
В разделе о спаме Google уточнил, что риску злоупотреблений могут быть подвержены хостинговые платформы и инструменты, позволяющие пользователям публиковать общие страницы, генерируемый контент или веб-приложения.
В обновлённом пояснении говорится, что спамеры нередко используют открытые формы комментариев и другие механизмы добавления пользовательского контента на сайтах, которые не ожидают таких действий. Аналогичной угрозе могут подвергаться платформы и инструменты публикации: злоумышленники способны создавать большое количество страниц или сайтов, нарушающих политику Google в отношении спама и не несущих либо почти не несущих ценности для интернета.
Таким образом, рекомендации теперь прямо относятся к сервисам, где пользователи создают страницы или иные доступные в интернете материалы. Это касается, в частности, сервисов, инструментов, сайтов и приложений, предназначенных для обмена контентом или совместной работы.
Индексация только предназначенного для поиска контента
Google добавил отдельный раздел для владельцев платформ и сайтов с пользовательским контентом. В нём описаны меры, которые могут помочь предотвратить вредоносную активность и избежать ручных мер, включая исключение сайта из поисковой выдачи.
Компания рекомендует оценивать, должен ли созданный пользователем контент находиться через поисковые системы или он предназначен только для прямого доступа по ссылке. Речь идёт, например, об общих страницах, сгенерированных результатах и интерактивных инструментах.
Если страницы создаются прежде всего для обмена, совместной работы или практического использования, а не для публичного поиска, Google советует по умолчанию ограничивать их индексацию. Для этого предлагается использовать правило noindex через метатег robots или HTTP-заголовок X-Robots-Tag, либо блокировать сканирование в robots.txt.
В рекомендациях Google подчёркивается: «Если ваш сервис позволяет пользователям создавать общие страницы, генерируемые результаты или интерактивные инструменты, подумайте, предназначен ли этот контент для поиска через поисковые системы или только для прямого доступа пользователей, у которых есть ссылка».
Контроль признаков возможных ручных мер
Ещё одно изменение посвящено мониторингу активности пользователей и выявлению ситуаций, в которых содержание сайта может начать негативно влиять на него. Google рекомендует подтвердить сайт или поддомен в Search Console, чтобы получать уведомления по электронной почте в случае ручных мер или обнаружения проблем с безопасностью.
Также владельцам платформ предлагается регулярно проверять отчёты об индексировании страниц и эффективности в поиске. Особое внимание следует уделять неожиданным всплескам числа проиндексированных страниц, показов или поисковых запросов, не соответствующих назначению платформы.
Google рекомендует отслеживать показатели создания и индексации контента на уровне всей платформы, а также настраивать уведомления об аномалиях. В качестве примеров названы резкий рост числа новых публичных страниц и ситуация, когда небольшое число пользователей создаёт значительную долю URL, доступных для индексации.
Обновлённые правила прямо связывают ответственность платформ с публикационной активностью их пользователей. Владельцам сервисов, допускающих создание страниц, публикацию материалов или генерацию контента, предлагается заранее предотвращать злоупотребления, контролировать индексацию и отслеживать подозрительные изменения, а не ждать применения ручных мер.
Для специалистов по SEO изменения означают необходимость учитывать, используют ли сайты сторонние платформы публикации способами, нарушающими политику Google в отношении спама, а также насколько сами такие платформы защищены от злоупотреблений.
