llms.txt для сайта: что это и как создать

Пример структуры llms.txt

# Название сайта

> Краткое описание: что это за сайт, для кого он и почему ему можно доверять.

## Основные страницы

- [Главная](https://example.com/): кратко о продукте
- [Услуги](https://example.com/services): что предлагает компания
- [Исследования](https://example.com/research): методика и источники
- [Контакты](https://example.com/contact): официальный контакт

## Что можно цитировать

- факты о компании
- продуктовые возможности
- исследования и методика
- FAQ и справочные материалы

Что проверяет GEO Optimizer

Частые ошибки

Чем llms.txt отличается от robots.txt и sitemap.xml?

llms.txt не заменяет robots и sitemap: robots управляет доступом, sitemap — списком URL для индексации, llms.txt — приоритетами для AI-агентов. Для Google Search файл не обязателен; для GPTBot, PerplexityBot и ClaudeBot он ускоряет понимание структуры.

Пример хорошего и плохого llms.txt

Хороший файл: H1 бренда, blockquote, H2-разделы и ссылки с пояснениями. Плохой — пустой шаблон или копия всего sitemap.

# GEO Optimizer

> Платформа проверки AI-видимости.

## Методика

- [Аудит](https://geo-optimizer.ru/audit-saita-dlya-ii): проверка, robots, schema.

Как создать llms.txt вручную или с GEO Optimizer

1. Выберите 15–25 публичных URL.
2. Добавьте H1 и blockquote (1–2 предложения).
3. Сгруппируйте ссылки в H2.
4. Опубликуйте /llms.txt в корне canonical-домена.
5. Проверьте файл бесплатным аудитом на главной.
6. Обновляйте при смене услуг и ключевых страниц.

Как GEO Optimizer оценивает llms.txt

Категория llms.txt даёт до 18 баллов в AI Visibility Score: наличие файла, H1, blockquote, H2, ссылки, глубина, llms-full.txt. Исследование Princeton GEO (KDD 2024) показывает пользу источников и структуры; переспам ключами не работает.

Нужен ли llms.txt validator или checker?

Отдельный llms txt validator полезен для проверки синтаксиса, но продуктовая проверка должна включать доступность по HTTP, согласованность с robots.txt и наличие приоритетных страниц. GEO Optimizer в категории llms.txt проверяет файл в контексте всего AI Visibility Score, а не изолированно.

• Файл отдаёт 200 на canonical-домене.
• Есть H1 с названием бренда.
• Blockquote описывает сайт в двух предложениях.
• H2 разделяют продукт, методику, платформы.
• Ссылки ведут на живые публичные URL.
• Нет /admin, /api/private, черновиков.

llms.txt и llms-full.txt

Короткий /llms.txt — навигатор; расширенный /llms-full.txt — методика, ограничения оценки, endpoints (/ai/faq.json, /ai/service.json). Не копируйте весь legal-раздел в llms.txt: вынесите в Optional.

Связь с аудитом: 18 баллов из 100

Если llms.txt пустой, а robots и schema в порядке, оценка всё равно теряет до 18 баллов. Часто проще поднять llms.txt, чем писать десятки новых статей. Сначала исправьте robots (18) и schema (16), затем llms и контент (12).

Пошаговый пример llms.txt

Ниже — фрагмент реального подхода (сокращённо). Полный файл: /llms.txt на сайте.

## Important Routes

- [Аудит для ИИ](https://geo-optimizer.ru/audit-saita-dlya-ii): проверка, robots, schema.
- [AI SEO](https://geo-optimizer.ru/ai-seo): термины GEO, SEO, AEO.
- [llms.txt гайд](https://geo-optimizer.ru/llms-txt-generator): этот материал.

Такой формат помогает AI-агенту выбрать 15–25 важных URL, а не сканировать весь sitemap без приоритета. Включайте только страницы, которые действительно стоит показывать как источник: продукт, услуги, тарифы, исследования, документацию, контакты и сильные справочные материалы.

Какие страницы включать в llms.txt по типу сайта?

llms.txt должен перечислять не все URL, а те, что вы готовы показывать как источник. Для SaaS — продукт, тарифы, документация, исследования. Для услуг — услуги, кейсы, контакты, FAQ. Для медиа — редакционная политика, авторы, основные рубрики. Не добавляйте личный кабинет, оплату, тестовые поддомены и черновики.

Как обновлять llms.txt при изменении сайта

Обновляйте файл при смене тарифов, запуске нового лендинга, объединении URL через 301 или публикации исследования. Удаляйте страницы, которые больше не отвечают 200, и не оставляйте ссылки на устаревшие адреса. Синхронизируйте lastmod в sitemap и дату в абзаце «материал обновлён» на ключевых страницах.

1. Проверьте, что каждая ссылка в llms.txt отдаёт 200.
2. Удалите URL, ушедшие под 301 или 404.
3. Добавьте новую ключевую страницу с однострочным описанием.
4. Обновите blockquote, если изменилось позиционирование.
5. Запустите повторный аудит на главной.

Ошибки при публикации llms.txt

Частые промахи: файл только на staging, ссылки на 404, отсутствие blockquote, копия sitemap без описаний, ссылки на URL под 301. После правок снова проверьте категорию llms.txt в AI Visibility Score — она даёт до 18 баллов из 100.