Агентная коммерциясловарь терминов

Видимость и поиск

Content Signals

Content Signals Policy

Определение

Строки в robots.txt, которыми сайт сообщает, для чего можно использовать его содержимое после обхода: для поиска, для ответов ИИ или для обучения моделей.

Подробнее

robots.txt отвечает только на вопрос «можно ли читать страницу». Content Signals добавляют вопрос «зачем»: строка Content-Signal с ключами search, ai-input и ai-train и значениями yes или no. Например, сайт может разрешить поиск и ответы ИИ со ссылкой, но запретить обучение.

Политику предложила Cloudflare 24 сентября 2025 года и добавила её в управляемые robots.txt своих клиентов. Это заявление о предпочтениях, а не техническая защита: соблюдение зависит от того, кто обходит сайт.

Для производителя, которому важно попадать в ответы ассистентов, разумная позиция — не закрывать ai-input: без него сайт выпадает из ответов. Решение об обучении — отдельное и зависит от того, насколько ценен сам текст.

Связанные статьи