Руководство / Генератор политики доступа для ИИ

Генератор политики доступа для ИИ

Редакция от 7 октября 2026 г.

Пять вопросов, и у вас есть robots.txt с правилами по ботам, строка Content-Signal и черновик условий. Всё считается в вашем браузере, на сервер ничего не уходит.

Сайт

Нужен для строки Sitemap и текста условий.

1. Поиск и ответы ассистентов

Пускать ботов, которые индексируют сайт для ответов ИИ со ссылкой на вас?

OAI-SearchBot, Claude-SearchBot, PerplexityBot. Если нет, вас не будет в таких ответах.

2. Агенты по поручению пользователя

Пускать агентов, которые читают страницы, когда человек попросил?

ChatGPT-User, Claude-User, Perplexity-User. Это ваши потенциальные покупатели.

3. Обучение моделей

Разрешить использовать материалы для обучения моделей?

GPTBot, ClaudeBot, CCBot, Google-Extended, Applebot-Extended. Прямого трафика это обычно не приносит.

4. Закрытые разделы

Пути в robots.txt видны всем: секретное закрывайте авторизацией.

5. Контакт для вопросов

robots.txt

Что учесть

    Условия для ИИ (черновик)

    Как пользоваться

    1. Ответьте на вопросы слева: результат справа обновляется сразу.
    2. Скопируйте или скачайте robots.txt и положите его в корень сайта.
    3. Откройте https://ваш-сайт/robots.txt и убедитесь, что файл доступен.
    4. Проверьте сайт сканером: он покажет, какие боты закрыты.

    Что делает генератор и чего не делает

    • Формирует правила для известных ИИ-ботов по назначению: обучение, поиск и ответы, агенты по поручению пользователя.
    • Добавляет строку Content-Signal (search, ai-input, ai-train): её соблюдают не все ИИ-компании.
    • Не защищает данные: это просьба, а не замок. Закрытые разделы должны быть закрыты авторизацией.
    • Не заменяет юриста: шаблон условий нужно проверить.
    • Если у вас уже есть robots.txt (например, с правилами CMS), перенесите из результата только нужные группы и сохраните прежние правила и строку Sitemap.
    • Список ботов зафиксирован на дату редакции и со временем устареет: сверяйтесь с документацией операторов.

    Подробнее о том, кого и зачем пускать: Кого пускать на сайт.