Что такое краулинговый бюджет и как его посмотреть

Краулинг в SEO — это процесс считывания или сканирования страниц сайта роботами поисковых систем, для подальшей индексации и формирования поисковой выдачи.

Вебмастера используют также понятия, как краулинговый бюджет и краулинговый спрос.

Краулинговый спрос — это количество страниц сайта, внесенные в список планов поисковых роботов по сканированию с целью дальнейшей индексации.

Краулинговый бюджет — это максимальное количество страниц ресурса, которые могут просканировать поисковые роботы за определенный период времени.

Недостаток его в том, что как и любой другой бюджет, он имеет ограничения. Поэтому его нужно обязательно учитывать при продвижении веб-ресурсов (от 1000 страниц), так как не проиндексировав важные оптимизированные страницы, вы не получите ожидаемого результата. В таком случае продвижение будет неэффективным и нецелесообразным

Есть 2 важных момента по бюджету для страниц:

1. Гугл автоматически сам распределяет краулинговый бюджет. К примеру: вашему сайту он выделил бюджет на 100 страниц в сутки. Может показаться что этого даже много, но если ваш сайт является интернет-магазином, то 100 страниц могут запросто появиться за 1 день, а остальные страницы тоже нужно продвигать. Все за раз робот может не обойти.

2. Зачастую в индекс попадают страницы по низкочастотным запросам, а по высокочастотным пролетают.

Без оптимизации краулингового бюджета могут быть проблемы с индексацией страниц сайта.

Как посмотреть краулинговый бюджет в Search Console

Информацию на текущий краулинговый бюджет можно посмотреть в Google Search Console.

Шаг 1. Зайдите в Search Console и выберите в списке ресурс (ваш сайт).

Краулинговый бюджет это

Шаг 2. Найдите в левом меню внизу раздел «Настройки».

Понятие краулингового бюджета

Шаг 3. В открывшимся окне вы увидите настройки ресурса и блок Сканирование (Статистика сканирования). Нажмите кнопку «Открыть отчет».

Определение краулингового бюджета

В новом окне вы сможете увидеть:

сколько всего было запросов на сканирование;
общий размер скачиваний (в байтах);
среднее время ответа (мс);
динамический график по датам и показателям.

Как посмотреть краулинговый бюджет

Статус хоста - есть ли проблемы и какие именно, можно посмотреть нажав на него.

Важные аспекты по бюджету для страниц в Гугле

Как посмотреть краулинговый бюджет в Search Console. Пошаговая инструкция

Также в статистике сканирования можно посмотреть распределение запросов на сканирование:

по ответу;
по типу файла;
по цели;
по типу робота Googlebot.

Просмотр краулингового бюджета в GSC

Данные по каждому счетчику можно посмотреть, нажав на него. Также можно выгрузить нужный отчет кнопкой «Экспортировать».

Инструкция для просмотра краулингового бюджета в Google Search Console

Как оптимизировать или увеличить краулинговый бюджет, читайте в следующей инструкции.

Что такое краулинговый бюджет и как его посмотреть

Как посмотреть краулинговый бюджет в Search Console

Похожие вопросы

Похожие вопросы

SEO пузомерки

Для новичков

Линкбилдинг

Для опытных

Аналитика

Контент

Другое