Проверка /llms-full.txt — структура и содержимое

Что такое /llms-full.txt и когда он нужен? llms-full.txt

Разница между llms.txt и llms-full.txt

Если /llms.txt — это индекс со ссылками на важные страницы, то /llms-full.txt — сам контент этих страниц, объединённый в один файл. Слоган спецификации точный: «One fetch, all the content. No retries, no rate limits per page, no broken links». Агент загружает один файл и получает полное содержимое всех ключевых страниц сайта без дополнительных запросов. Разделители между страницами — горизонтальные линии (---) с заголовком URL над каждым блоком.

Когда llms-full.txt выгоден

Файл оптимален для нескольких сценариев. Документация малых и средних сайтов: если весь контент помещается в разумный размер (до нескольких мегабайт), один файл кардинально упрощает работу агентов. Стабильный контент: документация API, технические спецификации, справочники — то, что меняется редко. Инструменты разработчиков: CLI-инструменты и IDE-плагины часто загружают llms-full.txt для offline-режима. Для больших новостных сайтов или e-commerce с тысячами продуктов этот файл нецелесообразен — его следует не создавать.

Структура правильного llms-full.txt

Инструмент проверяет: наличие файла и его HTTP-статус, MIME-тип ответа, размер файла, количество разделов (блоков ---), количество URL-ссылок и наличие связи с основным /llms.txt (ссылка на llms-full.txt должна присутствовать в llms.txt). Содержимое каждого раздела должно быть чистым Markdown без служебных элементов CMS: меню, виджетов, кода аналитики. Рекомендуется генерировать файл автоматически при сборке проекта, а не вести вручную.

Практические рекомендации по реализации

Контролируйте размер файла: более 2–3 МБ выходит за пределы контекстного окна большинства моделей и теряет смысл. Курируйте страницы так же тщательно, как в llms.txt — не добавляйте низкоценный контент. Добавьте Last-Modified HTTP-заголовок, чтобы агенты могли проверять актуальность без полной загрузки. Включите YAML frontmatter в начало файла с общими метаданными. Если сайт использует CDN — убедитесь, что файл не кешируется на долгий срок или имеет механизм инвалидации кеша при обновлениях.

Развернуть все

Часто задаваемые вопросы

Когда стоит создавать /llms-full.txt, а когда нет?

Создавайте для сайтов с документацией или стабильным контентом, если итоговый файл не превысит 2–3 МБ. Не создавайте для крупных новостных сайтов или e-commerce с тысячами страниц — файл не влезет в контекстное окно.

Как /llms-full.txt связан с /llms.txt?

/llms.txt — индекс со ссылками на страницы. /llms-full.txt — тот же контент, объединённый в один файл. В /llms.txt должна быть явная ссылка на /llms-full.txt, чтобы агенты знали о его существовании.

Как генерировать /llms-full.txt автоматически?

Напишите скрипт, который при каждом деплое обходит страницы из /llms.txt, конвертирует HTML в Markdown и объединяет с разделителями ---. Используйте готовые библиотеки html2markdown на любом языке.

Нужно ли включать все страницы сайта?

Нет. Только приоритетный контент — как в /llms.txt. Цель не полнота, а дать агенту самое важное в компактном виде без лишних HTTP-запросов.