Переглядайте візити пошукових роботів і бюджет сканування (Pro)

Фіксуйте кожне відвідування Google, Bing та пошукових роботів ШІ, дізнавайтеся, де вони марнують час, і виправляйте це в один клік.

Відкрийте вкладку Crawlers
Перейдіть до розділу SEO, Ефективність пошуку, Роботи.
Увімкнути ведення журналу
Позначте «Журналювати візити краулерів». Кожен візит додається до одного лічильника на сторінку, тому журнал ніколи не перевищує 10 000 рядків і сторінки відвідувачів не сповільнюються.
Перегляньте свій краулінговий бюджет
Бюджет сканування показує, скільки відвідувань роботів припало на сторінки, які не можуть ранжуватися, за типами: фільтри, відсутні сторінки, перенаправлення, помилки, внутрішній пошук.
Усунути перевитрати
Параметр «Блокувати пошукових роботів» додає правило robots.txt, а «Перенаправляти їх» відправляє їх далі. Параметр «Скасувати правило для роботів» скасовує його.

Відкрийте вкладку Crawlers