Agent Ready Scan

Главная / О роботе

Робот AgentReadyScanBot

Страница для владельцев сайтов и администраторов · редакция от 21 октября 2026 г.

Что это

AgentReadyScanBot — робот сканера agentreadyscan.ru. AgentReadyScan выполняет проверки как по запросу пользователя, так и в рамках собственных исследований и формирования отраслевых выборок. Проверка по запросу запускается, когда кто-то ввёл адрес сайта на agentreadyscan.ru или вызвал API. Исследовательские проверки запускает оператор сервиса по заранее подобранному списку сайтов. Робот обращается только к общедоступным страницам и техническим ресурсам сайта, не обходит средства ограничения доступа и не предназначен для сбора персональных данных. В остальных случаях сайты он не обходит: ни по расписанию, ни как поисковый краулер.

Как он представляется

Mozilla/5.0 (compatible; AgentReadyScanBot/1.1; +https://agentreadyscan.ru/bot/)

Паспорт робота

У робота есть паспорт ИИ-агента в открытом формате 0.1: кто оператор, что робот делает, как его остановить. Файл: /.well-known/agent-passport.json. Проверить его может любой — на паспорт-агента.рф.

Что запрашивает

За одно сканирование — около 20 запросов, по одному, без параллельных подключений и с таймаутами: главная страница, /robots.txt, /sitemap.xml, /llms.txt, /llms-full.txt, /AGENTS.md, /sitemap.md, файл подключения к протоколу покупок, несуществующий адрес для проверки кода 404, до трёх страниц из карты сайта (карточка товара, услуги или материала) и, если есть, товарный фид.

Чтобы понять, не режет ли защита ИИ-ботов, сканер делает по одному запросу главной страницы с User-Agent браузера, GPTBot и ClaudeBot. Это проба блокировок, а не имитация краулинга: страницы такими запросами не обходятся и не сохраняются.

Проверка MCP-сервера (по запросу на /mcp/ или mcpprotocol.ru/mcp-check/) отправляет на указанный адрес до 11 запросов, по одному: server/discover и его варианты с неизвестной версией, без заголовка Mcp-Method, с несовпадающим Mcp-Method и с чужим Origin, неизвестный метод, GET, дважды tools/list; у прежних серверов — initialize и закрытие открытой им сессии; у закрытых — метаданные авторизации. Метод tools/call не отправляется никогда: инструменты сервера не вызываются. User-Agent тот же, с пометкой MCP-check.

Чего он не делает

Не заполняет формы, не входит в личные кабинеты, не обходит капчу и защиту, не выполняет JavaScript, не заходит на порты кроме 80 и 443 и не обращается к внутренним адресам. Читает только то, что отдаётся любому посетителю. Это не поиск уязвимостей.

Как запретить обход

Добавьте в robots.txt:

User-agent: AgentReadyScanBot
Disallow: /

Мы исполняем этот запрет: если для AgentReadyScanBot закрыт весь сайт, сканирование не выполняется, а в ответе сказано, что запрет принят. При проверке по запросу посетителя общий запрет для всех роботов (User-agent: *) мы не считаем запретом для нас: человек сам попросил просканировать сайт, а такой запрет отражается в отчёте как замечание. При исследовательском сканировании общий запрет считается отказом, и сайт в выборку не попадает.

Лимиты

С одного адреса — не более 12 сканирований в час, повторное сканирование того же адреса в течение 15 минут отдаётся из кэша и сайт не нагружает. Одновременно сервис выполняет не больше трёх сканирований, остальным предлагается повторить позже.

Что сохраняется

Домен, дата сканирования, определённая группа сайта, уровень и результат по каждому пункту, а также короткие выдержки, нужные для понятных замечаний (например, заголовок страницы). Страницы целиком не сохраняются. Результаты исследовательского сканирования могут сохраняться в том же составе: домен, технические признаки, дата проверки, версия методики, итоговый уровень и обнаруженные технические проблемы. Результаты по отдельным сайтам не публикуются, публикуются только обобщённые данные. Удалить записи по своему сайту можно, написав на info@ai-d2c.ru. Подробнее — в политике обработки данных.

Жалобы и вопросы

Если робот ведёт себя иначе, чем описано здесь, или нагружает сайт, напишите на info@ai-d2c.ru с адресом сайта и временем запросов (по часовому поясу UTC).