# ClaudeBot — что это за бот и как им управлять

ClaudeBot (Anthropic): Текст страниц, который может попасть в обучение моделей Claude. Токен robots.txt, проверка подлинности, слушается ли правил. Проверено 2026-10-19.

Адрес: https://agentfirewall.ru/boty/claudebot/ · Обновлено: 2026-10-19

- Владелец: Anthropic
- Назначение: Сбор содержимого для обучения моделей
- Токен robots.txt: `ClaudeBot`
- Слушается robots.txt: да — Слушается правил robots.txt
- Проверка подлинности: только строка UA. Оператор не публикует адресов и не задаёт способа проверки: подлинность по строке user-agent подтвердить нельзя, остаётся ограничение частоты.
- Строки user-agent: Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)
- Что берёт: Текст страниц, который может попасть в обучение моделей Claude.
- Документация: https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler
- Риск: низкий
- Проверено: 2026-10-19

Anthropic не публикует диапазоны адресов, подлинность проверяется только по строке user-agent. Запрет ClaudeBot не закрывает Claude-SearchBot и Claude-User — у каждого свой токен.

## Правила

```
User-agent: ClaudeBot
Allow: /
```

```
User-agent: ClaudeBot
Disallow: /
```

```nginx
# nginx: ограничить ClaudeBot частотой (ответ 429, честный бот замедлится)
map $http_user_agent $afw_claudebot {
    default 0;
    ~*ClaudeBot 1;
}
limit_req_zone $binary_remote_addr zone=afw_claudebot:10m rate=1r/s;
```


---
ООО «САРМАТЕХ» · info@a2aprotocol.ru · данные справочника CC BY 4.0
