6 рабочих способов проверить сайт на фильтры поисковых систем

Веб-ресурсы, которые нарушают правила поисковых систем, могут попасть под действие специальных алгоритмов — фильтров. Как результат, проседают позиции отдельных страниц или всего сайта или он вовсе выпадает из индекса. Узнайте, как проверить находится ли сайт под санкциями поисковых систем, как проверить домен перед покупкой и что делать, если ваш сайт находится под фильтром. 

В Yandex существуют такие типы фильтров:

1. Переоптимизация. Дается за переизбыток использования ключевых фраз или несоответствие страницы ключевым словам, под которые она оптимизирована. Существенно падает трафик и сайт понижается в выдаче. Для снятия убираются лишние вхождения ключевых запросов, переоптимизированные конструкции, текст проверяется на грамотность и т. д.
2. Баден-Баден. Есть 2 разновидности: доменный и документный. Документный накладывается за заспамленность, «воду» или скрытые тексты. Некоторые группы запросов резко теряют позиции. В этом случае необходимо повысить информативность контента и снизить водность. Доменный дается за переоптимизацию. Снижается трафик, понижаются позиции в выдаче ПС. Для снятия убирается избыточное вхождение ключевых запросов, переоптимизированные тексты заменяются на полезные для пользователей. 
3. АГС. Накладывается на весь сайт. Как правило, ресурс в этом случае не соответствует нескольким критериям: неуникальный контент, агрессивная реклама, наличие множества SEO-ссылок, дубли страниц, неудобное меню, плохое юзабилити. Для снятия таких санкций нужна комплексная работа по улучшению ресурса, которая сделает его конкурентоспособным на фоне остальных.
4. «Минусинск» понижает в выдаче сайты, активно использующие SEO-ссылки. Падение трафика — еще один признак попадания под фильтр. Для его снятия уберите все купленные ссылки низкого качества, напишите владельцам сайтов и бирж, на которых покупали ссылки, для их снятия, затем нажмите кнопку «Я исправил» в Яндекс.Вебмастере.
5. Накрутка поведенческих факторов (кликджекинг, имитация действий пользователей, криптоджекинг). Применяется к ресурсам, искусственно улучшающим поведенческие факторы для повышения сайта в поисковой выдаче либо использующим механизм обмана пользователей для получения доступа к конфиденциальной информации или компьютеру. Отключите такие сервисы и напишите в саппорт Яндекса. Это поможет избавиться от данного фильтра.
6. Аффилированность. Применяется к сайтам одинаковой тематики, имеющим одного владельца доменов, одинаковые контактные данные. Часто на таких ресурсах одинаковые товары, тексты и услуги. Как правило, у всех сайтов группы аффилиатов, кроме одного, снижаются позиции в поисковой выдаче. Этот один сайт ПС считают наиболее релевантным. Таким образом, чтобы не попасть под аффилиат-фильтр, необходимо избегать всех вышеописанных моментов, к нему приводящих.
7. Фильтр за некорректную мобильную версию. Если мобильная версия сайта недоработана, неудобна для пользователей, то применяются такие санкции. Всё, что нужно — адаптировать сайт под мобильные устройства для удобства пользователей.
8. Непот. Применяется к ресурсам, которые продают ссылки плохого качества, и характеризуется потерей передачи веса ссылок. Для снятия необходимо улучшить качество ссылок и расположить их в тексте естественно.
9. Фильтр 18+. Применяется к ресурсам, содержащим материалы для взрослых и при этом не соблюдающие правила законодательства для подобных ресурсов. Владельцу необходимо удалить или изменить подозрительный материал, либо следовать всем правилам для подобных сайтов.

В поисковой системе Google cайт может попасть под такие фильтры:

1. Панда. Один из популярных фильтров поиска Гугл. Специализируется на текстах и вообще контенте. Создавайте уникальный, полезный для людей контент, не забывая при этом о юзабилити сайта, тогда не будет повода применить к вам санкции. 
2. Пингвин. Наказывает за «плохие», сеошные ссылки. Это аналог Минусинска. Также характеризуется падением трафика. Для его снятия необходимо убрать все купленные ссылки.
3. Спам, созданный посетителями. Посетители оставляют в комментариях ссылки на другие сайты. Для снятия фильтра очистите весь спам и отправьте свой ресурс на повторную проверку для снятия фильтра.
4. Искусственные ссылки. Сайты, занимающиеся покупкой SEO-ссылок, теряют позиции. Для снятия фильтра уберите все подобные ссылки. Самый лучший вариант — это естественные ссылки. Этот фильтр, в отличие от Пингвина, ручной, а не автоматический. То есть его определяет не алгоритм, а асессор поисковой системы вручную.
5. Избыточное вхождение ключевых запросов и скрытый текст. Некоторые страницы или весь сайт целиком уходят из выдачи. В этом случае вам необходимо сделать так, чтобы весь текст страницы был виден, не допускается скрытый текст ни в каком виде. Также нужно убрать лишние вхождения ключевых запросов, переоптимизированные конструкции.
6. Агрессивный текстовый спам. Дается за скопированные с других ресурсов тексты, сгенерированные тексты, клоакинг и т. д.
7. Отсутствие мобильной версии. Если сайт не адаптирован под мобильные устройства, то, скорее всего, будут применены такие санкции. Характеризуются низким трафиком и низкими позициями с мобильных версий. Здесь выход только один — адаптировать ресурс под мобильные устройства.
8. Медленная работа сайта. Если ресурс работает очень медленно, то позиции, скорее всего, будут плохими. Выход очевиден — увеличьте скорость загрузки сайта.
9. Битые ссылки. То есть на сайте зашкаливает количество ссылок, ведущих на страницы с 404 ошибкой (Not Found, «не найдено»). Есть специальные сервисы для поиска таких ссылок. Воспользуйтесь ими и «почистите» свой ресурс.
10. Песочница. «Песочница», или фильтр по возрасту домена, не дают прорваться в ТОП молодым сайтам. Даже если делать всё правильно, какое-то время высокого трафика и позиций ждать не стоит. Продолжайте развивать свой ресурс, делайте его привлекательным и интересным для пользователей, и вы сократите время пребывания «в песочнице».
11. «Дополнительный индекс» перемещает страницы с дублированным контентом в «Дополнительные результаты поиска», которые располагаются отдельно от основной выдачи по запросу и поэтому, как правило, пользователями не просматриваются. Если вдруг алгоритм определит, что на вашем сайте нет никакой полезной, интересной информации, то ресурс или его некоторые страницы переходят в дополнительный индекс.

За что сайт может попасть под фильтр поисковых систем: 

• неуникальный контент; 
• переоптимизация текстов ключами; 
• скрытый текст; 
• бессистемный линкбилдинг, добавление некачественных ссылок на сайт (о проверке обратных ссылок на сайт читайте наш материал); 
• злоупотребление продажей ссылок;
• накрутка поведенческих показателей; 
• агрессивная реклама, всплывающие окна; 
• заражение сайта вирусами (читайте материал, как защитить сайт от взлома и вирусов); 
• использование аффилиатов; 
• другие «серые» технологии: кликджекинг, клоакинг, криптоджекинг, фишинг и прочие способы.

Это лишь часть возможных нарушений. Каждая поисковая система дает свои требования, причем они регулярно обновляются и дополняются. По ссылкам вы найдете списки нарушений Яндекса и Google, за которые они применяют санкции. Цель фильтрации — сделать поиск более качественным.

Если вы заметили, что позиции сайта резко просели, страницы выпали из индекса одного из поисковиков и трафик упал, то это серьезный повод проверить сайт на попадание под фильтры. 

Наверняка, вы уже знаете: 

• как проверить позиции сайта в поисковых системах;
• как проверить посещаемость сайта (своего или конкурента). 

Об автоматических фильтрах, которые накладываются вследствие обновления основного алгоритма, Google не уведомляет. Но о мерах, принятых вручную, будет сообщение в Search Console. Перейдите в раздел Проблемы безопасности и меры, принятые вручную → Меры, принятые вручную.

Если санкций нет, то получите такое сообщение:

В случае наложения санкций будет описана причина и дальнейшие действия. Например, при спаме в разметке структурированных данных сообщение будет таким:

Все, что вам нужно сделать: исправить ошибку и нажать кнопку «Запросить проверку» в сообщении. Если вы все сделали верно, через некоторое время Google снимет фильтр.

Перейдите в Яндекс.Вебмастер. 

В Вебмастере сначала проверьте уведомления — если были применены санкции в ручном режиме, здесь будет сообщение с пояснением, что не так. Например, сообщение о переоптимизации:

Если сообщения нет, но вы подозреваете, что сайт попал под фильтр, перейдите в раздел Диагностика → Диагностика сайта и обратите внимание, есть ли фатальная ошибка «Обнаружены нарушения или проблемы с безопасностью».

Если проблем нет, получите следующее: 

Если вы собрались покупать уже существующий домен и у вас нет доступов к инструментам Yandex Webmasters и Google Search Console, то проверить сайт можно следующими способами:

1. Проверить показатель ИКС. 
2. Проанализировать посещаемость сайта за длительных период. 
3. Узнать количество страниц в индексе. 
4. Проверить позиции сайта по запросам. 
5. Проверить, какие позиции занимает сайт по брендовым запросам.
6. Использовать онлайн-сервисы. 

Рассмотрим каждый метод детальнее.

Анализируем ИКС

Первый способ проверки любого сайта на фильтры поисковых систем: проверить динамику ИКС (индекса качества сайта). 

Способ подходит только для Яндекса. Суть в том, что Яндекс аннулирует ИКС при попадании сайта под фильтр.

Для справки. Раньше для проверки сайта на фильтры Яндекса можно было перейти по ссылке

https://yandex.ru/yaca/cy/ch/[в конце — ваш домен]

и посмотреть на значение тИЦ — если все в порядке, то это значение было 0 или выше (в противном случае напротив тИЦ была надпись «не определен»). Но в конце 2017 года Яндекс.Каталог закрыли, а с сентября 2018 года тИЦ заменили на ИКС.

Теперь проверить любой домен на фильтры можно к примеру с помощью бесплатного парсера ИКС — авторизуйтесь, введите адрес главной страницы сайта в раздел Список доменов для проверки и нажмите Запустить проверку. 

После некоторого времени, в списке задач, Статус станет на Выполнено. Скачайте результат.

Вот такое значение ИКС мы получили:

Для проверки собственного сайта на санкции Яндекса достаточно зайти в Яндекс.Вебмастер и посмотреть на значение ИКС интересующей площадки в списке сайтов. Если у вас нет доступов, то можно использовать для проверки бесплатный инструмент Яндекса.

Анализируем динамику трафика

Второй способ, как проверить сайт на фильтры поисковых систем: проанализировать посещаемость за последний год или полгода. 

Если вы заметили, что в одной из поисковых систем трафик заметно снизился, а в другой остался стабильным, это явный признак санкций. 

Оценить трафик можно с помощью подключенной системы аналитики: Яндекс.Метрика, Google Analytics или Liveinternet. Если график посещаемости напоминает представленный ниже, то начинайте искать причины проблемы.

Google:

Yandex:

Полезный совет: сопоставьте дату проседания трафика с датой выхода очередного обновления алгоритма поисковика. Например, все обновления алгоритмов Google фиксируются на сервисе moz.com. О фильтрах Яндекса можно узнать из официального блога. Если даты совпадают, то вам будет проще понять, какой именно фильтр повлиял на работу сайта.

Анализируем количество страниц в индексе ПС

Третий способ проверки сайта на санкции поисковых систем: проанализировать количество страниц в индексе Яндекса и Google. 

Поисковые системы по-разному наказывают сайты за нарушение правил. Они могут понижать позиции в выдаче или исключать страницы из индекса. Если вы заметили, что в одной из ПС из индекса резко выпала существенная доля страниц, дело может быть именно в фильтрах.

Но тут важно правильно установить диагноз. Помимо фильтров могут быть следующие причины исключения страниц из индекса:

• запрет индексации сайта или отдельных страниц в robots.txt, .htaccess или настройках CMS; 
• заражение сайта вирусами или взлом (читайте наш материал о том, как защитить сайт от взлома и атак); 
• блокирование доступа роботам к сайту со стороны хостинг-провайдера; 
• сайт некоторое время был недоступен для сканирования роботами (например, если не был вовремя оплачен хостинг) и исключен из поиска.

Для быстрой проверки количества страниц в индексе зайдите в интересующий поисковик и введите запрос site:example.com. О всех возможных операторах поиска Google читайте здесь. Вы увидите такой результат: 

Резкое сокращение количества страниц — признак фильтрации. Проверить индексацию страниц и точно узнать, какие из них выпали из индекса, вы можете с помощью Яндекс.Вебмастера и Google Search Console.

Проверяем позиции по топовым запросам

Четвертый способ проверки сайта на санкции поисковых систем: анализ позиций сайта в поисковых системах. 

Выделите самые важные для вас запросы и регулярно снимайте по ним позиции в Яндексе и Google. Просадка в одной из ПС — возможное следствие применения автоматических санкций.

Снять позиции в поисковиках можно такими инструментами как: SE Ranking, Seolib, Semrush, Serpstat, Топвизор и другие. Рекомендуем снимать позиции регулярно. 

Проверяем позиции по брендовым запросам

Пятый способ, как обнаружить фильтры поисковых систем: проверить, если ли сайт в топе поисковых систем по брендовым запросам. 

Этот способ хорошо подходит, если вы покупаете домен и хотите проверить, не наложены ли на него санкции. Заходим в поисковик и вбиваем брендовый запрос типа “collaborator” или “коллаборатор” (то есть название бренда на английском и русском языках). Если на первой позиции не находится проверяемый домен, то с ним наверняка что-то не так.

Используем для проверки онлайн-сервисы

Шестой способ, как проверить фильтры ПС: использовать в работе специальные сервисы. 

Xtool

Есть ряд сервисов, анализирующих наличие санкций со стороны поисковых систем. Например, фильтры Яндекса (АГС, Минусинск и др.) неплохо определяет Xtool. Вводите интересующий домен, и если есть проблемы, они будут отражены в таблице:

PR-CY

Проверить сайт на АГС Яндекса можно с помощью PR-CY. Среди результатов проверки есть строка с проверкой на АГС:

Panguin Tool

Проверить наличие санкций в ПС Google можно с помощью англоязычного инструмента Panguin Tool для обнаружения «Панды», «Пингвина» и других фильтров. Для работы сервиса нужно разрешить доступ к Google Analytics и выбрать представление.

На графике отмечены даты обновления алгоритмов Google — таким образом, вы можете сопоставить изменения трафика с обновлениями и сделать выводы.

Похожий инструмент — Website Penalty Indicator. Он подходит только для Google и отображает изменение трафика сайта с привязкой к обновлениям алгоритмов.

Google Penalty Checker

Еще один сервис — Google Penalty Checker. Он показывает уровень влияния изменений в алгоритмах Google на трафик сайта (синий — позитивное влияние, оранжевый и красный — нейтральное и негативное).

Краткий чек-лист, что делать чтобы не попасть под фильтры ПС:

1. Публикуйте качественный, интересный, уникальный контент, который будет действительно полезен пользователям. 
2. Исключите спамные конструкции из текстов, метатегов. Узнайте, как правильно составлять метатеги.  
3. Не покупайте некачественные SEO-ссылки на сторонних ресурсах, стремитесь к повышению естественности ссылочной массы, старайтесь создать такой контент, чтобы пользователям самим захотелось им поделиться. Читайте подробную инструкцию, как наращивать качественную ссылочную массу. 
4. Ответственно подойдите к технической части: периодически проверяйте скорость загрузки, наличие “битых” ссылок, а также наличие других ошибок и сбоев. 
5. Обязательно адаптируйте ресурс для мобильных устройств. Мобильная версия должна быть такой же удобной, как и десктопная. 
6. Поработайте с юзабилити, структурой ресурса. Всё должно быть направлено на удобство пользователя. 
7. Не пользуйтесь методами «черного» SEO: клоакинг, накрутка, дорвеи, чтобы сайт не получил поисковые санкции. 
8. Исключите контент 18+ или оформите его по всем правилам, в соответствии с законодательством. 
9. Не располагайте разные сайты под один бизнес на одном хостинге, не регистрируйте домены на одного и того же владельца, делайте разными структуру сайта, формат отображения информации, верстку, шаблоны страниц и т. д. Иначе один из ресурсов будет понижен в выдаче.
10. Продвигайте сайт безопасными методами. Какими? Смотрите в SEO курсе для новичков Сергея Кокшарова, который доступен всем в нашей Академии Collaborator. А также читайте SEO книги 2021, где рассказываются актуальные методы продвижения сайтов. 

Как видите, есть много способов узнать о наложении фильтров на ваш сайт. Используя один или несколько из них, вы узнаете, что с вашим ресурсом не так. Оптимизируйте сайт правильно, получайте безопасные внешние ссылки, и у вас не будет проблем с поисковыми системами.

Делитесь опытом, с какими санкциями поисковых систем вам приходилось столкнуться и удалось ли снять фильтры?