Что ваш сайт разрешает агентам
Серверный запрос к robots.txt, llms.txt и AGENTS.md указанного адреса, разбор правил по токенам из справочника. Чужой код не исполняется, результат не сохраняется. Лимит — 10 проверок в час с одного адреса.
Ответ главной, наличие и содержимое robots.txt, наличие llms.txt и AGENTS.md, строку Sitemap. Для каждого из 26 ботов справочника — какая группа правил ему достаётся и разрешён ли корень сайта.
Серверных блокировок (403, 429 по user-agent), заголовков X-Robots-Tag на страницах, правил для отдельных разделов. Бот, который не слушается robots.txt, пройдёт мимо файла — проверка это отметит, но не докажет.
Три замечания по приоритету, ссылка на генератор правил и на сканер готовности agentreadyscan.ru, где сайт получает уровень L0–L4.
API для агентов: GET /api/v1/check?u=домен — описание в openapi.json.