Для ИИ-ассистентов

Нейро, Алиса и чат-боты читают на сайте два файла: llms.txt - короткое оглавление сайта для ИИ - и robots.txt, где сказано, каким роботам можно читать страницы. Платформа кладёт их на сайт сама при каждой публикации.

llms.txt собирается из страниц сайта: название и описание, разделы и ссылки с заголовками. В robots.txt добавляются явные правила для роботов Яндекса, Google и других ИИ-ассистентов с теми же разрешениями, что у остальных роботов.

Что такое llms.txt и где он лежит

llms.txt это обычный текстовый файл в корне сайта, по адресу «ваш-домен/llms.txt» (рядом с robots.txt). В нём коротко и без вёрстки описано, о чём сайт и какие страницы главные: название, описание в одну строку, разделы и ссылки с заголовками. ИИ-ассистенты (Нейро, Алиса, чат-боты) читают его первым, чтобы понять сайт целиком и не собирать смысл по кускам разметки, и точнее отвечают на вопросы о вас, ссылаясь на нужные страницы.

Класть его никуда не нужно: платформа собирает llms.txt из страниц сайта и кладёт в корень при каждой публикации, если тумблер «Собирать llms.txt при публикации» включён (по умолчанию включён). Проверить можно, открыв адрес сайта с /llms.txt в браузере. Свой файл нужен только если вы хотите написать текст сами: тогда положите его правкой в чате в папку public с именем llms.txt, и платформа перестанет собирать свой.

Пример llms.txt

Пример файла llms.txt целиком, каким платформа собирает его для магазина украшений на домене example.ru:

# Рассвет: украшения ручной работы

> Магазин украшений ручной работы: серьги, браслеты и колье из серебра. Доставка по России, оплата картой на сайте.

## Основные страницы

- [О мастерской](https://example.ru/o-nas): Кто мы, как делаем украшения и где нас найти

- [Доставка и оплата](https://example.ru/dostavka): Сроки, способы доставки и оплаты

## Каталог

- [Серьги](https://example.ru/catalog/sergi): Серьги из серебра и латуни, от 1 200 ₽

- [Браслеты](https://example.ru/catalog/braslety): Браслеты на каждый день и в подарок

## Блог

- [Как ухаживать за серебром](https://example.ru/blog/uhod-za-serebrom): Простые правила, чтобы украшения не темнели

Так устроен любой llms.txt по общему соглашению: первая строка «#» с названием сайта, под ней «>» с описанием в одну строку, дальше разделы «##» и в каждом список ссылок «- [заголовок](адрес): описание». Название и описание платформа берёт с главной страницы, разделы из первого сегмента адреса страниц (catalog, blog), заголовки и описания со страниц. В файле до 8 разделов и до 60 ссылок, главная страница в список не попадает.

Как настроить

1. Откройте «Проверки» → «Для ИИ-ассистентов».
2. Оставьте включёнными оба файла или выключите ненужный.
3. Решите, пускать ли роботов, которые собирают тексты для обучения моделей. Роботам, которые ищут ответ для пользователя, сайт открыт всегда.
4. Сохраните и опубликуйте сайт: файлы появятся после публикации.

Что важно знать

Что вы увидите

Страница «Для ИИ-ассистентов» в меню «Проверки»: тумблеры «Собирать llms.txt при публикации» и «Добавлять в robots.txt правила для ИИ-роботов», выбор для роботов, которые собирают тексты для обучения моделей («Разрешить» / «Запретить»), кнопки «Сохранить» и «Обновить на сайте сейчас». По умолчанию всё включено и обучение разрешено.

Состояние llms.txt: «собран платформой из страниц сайта», «на сайте свой файл, платформа его не трогает», «не собирается: выключено», «не собран: в сборке не нашлось главной страницы». Состояние robots.txt: «правила для ИИ-роботов дописаны», «robots.txt создан платформой», «в robots.txt сайта свои правила», «robots.txt сайта закрывает весь сайт, правила не добавлялись», «правила уже на месте». Блок «Что видит проверка сайта» показывает оба файла глазами аудита.

Роботы делятся на три группы: ищущие ответ на вопрос пользователя (открыты всегда), действующие от имени пользователя (открыты всегда) и собирающие тексты для обучения моделей (по вашему выбору). Файл llms.txt это оглавление сайта для ИИ: название, описание, до 8 разделов и до 60 ссылок.

Файлы кладутся при каждой публикации, но только сайтам, которые выкладывает платформа, открытым для поиска, не гибридным и не приложениям. Причина, почему файлы не добавляются, написана на самой странице.

Частые вопросы

Если не сработало