Экран «Файлы sitemap и ИИ»

Как поисковые системы и AI-ассистенты находят ваши страницы: XML-карты сайта, robots.txt, каким AI-краулерам разрешено читать сайт, llms.txt и отправка новых страниц в поисковые системы.

Открыть карты сайта и ИИ
В WordPress откройте SEO в меню, затем «Карты сайта и ИИ» в разделе «Отображение в поисковой выдаче» в боковом меню плагина. Как поисковые системы и ИИ-ассистенты находят ваши страницы: XML-карты сайта, robots.txt, каким ИИ-краулерам разрешено сканировать сайт, llms.txt и отправка новых страниц в поисковые системы.
Вкладка «Файлы Sitemap»
Откройте вкладку Карты сайта. Ваши XML-карты сайта: какие типы страниц в них содержатся, изображения, видео и новости, а также адрес для передачи поисковым системам.
Вкладка robots.txt
Откройте вкладку robots.txt. Редактируйте robots.txt с проверками, считывающими его так же, как поисковые системы, и тестируйте по нему любые адреса.
Вкладка «Краулеры ИИ»
Откройте вкладку AI crawlers. Выберите, какие поисковые роботы ИИ могут читать сайт — те, которые обучают модели, и те, которые отвечают на вопросы со ссылкой на вас.
Вкладка llms.txt
Откройте вкладку llms.txt. Опубликуйте llms.txt (и llms-full.txt), чтобы ИИ-ассистенты знали, чему посвящен сайт и какие страницы важны.
Вкладка «Индексирование»
Откройте вкладку Индексирование. Сообщайте Bing и другим поисковым системам IndexNow о новых и измененных страницах в момент их изменения, а также отправляйте карту сайта в Google и Bing.