Блог

Агент скачивает ваш HTML и выбрасывает большую часть. Как сразу отдать ему чистый Markdown: согласование, ловушка Vary и URL-двойники .md.

robots.txt отвечает только, можно ли скачать страницу. Content-Signal говорит, что с ней можно делать дальше: индексировать, отвечать, обучать.

Готовые robots.txt для трёх случаев: пустить всех, разрешить поиск но запретить обучение, закрыть ИИ полностью. И ошибки, которые их ломают.

Мы измерили двенадцать известных страниц собственным движком. В среднем 98% отправленного не доходит до модели. Что выживает и почему.

Почти никогда дело не в модели. Пять режимов отказа в слое чтения, измеренные на реальных страницах, включая тот, где рендеринг уходит в таймаут.

Три вещи решают, сможет ли ИИ процитировать ваш сайт: robots.txt, JavaScript и сколько текста переживает извлечение. Как проверить всё три.

ИИ-агенты читают ваш сайт через другую дверь, не ту, через которую заходят люди. AgentReady измеряет, что они находят, и что чинить первым.

Сканер Cloudflare проверяет, какие агентные протоколы объявляет ваш сайт. Наш — переживает ли контент чтение. Вам нужны оба ответа.