Crawler-Besuche und Crawling-Budget anzeigen (Pro)

Erfassen Sie jeden Besuch von Google, Bing und den KI-Crawlern, sehen Sie, wo diese Zeit verschwenden, und beheben Sie es mit einem Klick.

Öffnen Sie den Tab „Crawlers“
Gehen Sie zu SEO, Suchleistung, Crawler.
Protokollierung aktivieren
Aktivieren Sie „Crawler-Besuche protokollieren“. Jeder Besuch wird einem Zähler pro Seite hinzugefügt, sodass das Protokoll nie mehr als 10.000 Zeilen umfasst und die Seiten der Besucher nicht verlangsamt werden.
Lesen Sie Ihr Crawling-Budget
Das Crawling-Budget zeigt nach Typ an, wie viele Crawler-Besuche auf Seiten entfielen, die nicht ranken können: Filter, fehlende Seiten, Weiterleitungen, Fehler, interne Suche.
Verschwendung beheben
„Crawler fernhalten“ fügt eine robots.txt-Regel hinzu und „Weiterleiten“ leitet sie weiter. „Robots-Regel rückgängig machen“ nimmt dies zurück.

Öffnen Sie den Tab „Crawlers“