РАЗРАБОТКА

Cloudflare запустила сервис проверки сайтов для AI-агентов

Cloudflare запускает инструменты оптимизации сайтов для AI-агентов, чтобы повысить их видимость и рекомендации.

✍️ Редакция iTech News | 20.09.2025 | ⏱ 3 мин | Источник: Cloudflare Blog
Cloudflare внедрил инструменты для AI-агентов

17 апреля 2026 года Cloudflare запустила isitagentready.com — бесплатный сервис, который оценивает, насколько сайт понятен AI-агентам. Для медиа, SaaS и интернет-магазинов это важнее, чем звучит: если агент не видит карту сайта, правила для ботов или markdown-версию страницы, он хуже находит ваши материалы и сервисы.

Agent Readiness — это скорее Lighthouse, чем новый SEO-ритуал

Cloudflare не обещает «поднять сайт в рекомендациях ИИ» и не считает, как часто агент вас посоветует. Компания предлагает диагностику: сервис проверяет, может ли агент найти сайт, прочитать его, понять правила доступа и обнаружить машинные интерфейсы. Сама Cloudflare формулирует сдвиг коротко: теперь вебу нужно «говорить» с AI-агентами.

В этом смысле инструмент ближе к Google Lighthouse, чем к классическому SEO. Сначала 17 апреля Cloudflare запустила публичную проверку и данные в Radar, а 12 мая 2026 года добавила отдельную вкладку Agent Readiness в URL Scanner. То есть речь идет не о модной надстройке, а о новом техническом чек-листе для сайтов.

Цифры показывают, что рынок только начинает

Для запуска Cloudflare просканировала 200 тыс. самых посещаемых доменов и получила довольно трезвую картину. У 78% сайтов есть robots.txt, но в большинстве случаев он написан для обычных поисковых краулеров, а не для AI-агентов. Лишь 4% ресурсов уже используют Content Signals в robots.txt, чтобы явно описать правила работы с AI.

С машиночитаемым форматом тоже скромно: только 3,9% сайтов корректно отдают text/markdown по запросу с заголовком Accept: text/markdown. А такие новые сигналы, как MCP Server Card и API Catalog, Cloudflare нашла меньше чем на 15 сайтах во всей выборке. Рынок пока на той стадии, где преимущество дает не огромный бюджет, а аккуратно настроенные файлы и заголовки.

Что именно проверяет сервис

Сканер смотрит на четыре слоя. Первый — обнаружение: robots.txt, sitemap.xml и Link-заголовки. Второй — доступность материалов для машинного чтения, включая markdown-представление. Третий — правила доступа для ботов, в том числе Content Signals и Web Bot Auth. Четвертый — машинные возможности сайта: Agent Skills, API Catalog, OAuth-обнаружение, MCP Server Card и WebMCP.

Если проверка проваливается, сервис показывает, чего именно не хватает, и даже предлагает подсказку для разработчика или кодового агента. Это уже не спор о «будущем SEO», а вполне приземленная задача для команды, которая ведет документацию, API или публичный каталог услуг.

Значение для рынка

Для русскоязычных команд вывод простой: сайту уже мало быть удобным для человека и Google. Если вы продаете SaaS, публикуете документацию, ведете медиа или привлекаете заявки через органический трафик, стоит проверить, насколько ваши материалы читаемы для AI-агентов. Для агентств и МСБ это новый слой технической оптимизации, для корпораций — вопрос управляемого доступа к данным и API, а для стартапов — шанс занять нишу раньше более неповоротливых конкурентов.

Оригинал: Cloudflare Blog. Дополнительный источник: Cloudflare Developers.

Следующий шаг для рынка очевиден: не ждать, пока агентный трафик станет нормой, а заранее решить, какие части сайта вы хотите открыть ботам, а какие лучше ограничить правилами доступа.

Поделиться: Telegram X LinkedIn