llms.txt

llms.txt -- это предлагаемый стандарт: простой текстовый файл в корне сайта (например, example.com/llms.txt), который помогает большим языковым моделям понять структуру и самый важный контент вашего сайта. Идея похожа на robots.txt или sitemap.xml, но вместо поисковых роботов он нацелен на ИИ-ассистентов. Предложение выдвинул Джереми Ховард (fast.ai) в 2024 году, и с тех пор его подхватывает всё больше сайтов.

Проблема, которую он решает: современные сайты полны навигации, рекламы, скриптов и прочего шума, через который модели приходится продираться, чтобы найти суть, а контекстное окно модели ограничено. llms.txt предлагает кураторский, чистый обзор в Markdown: короткое описание проекта, ссылки на ключевые страницы с пояснением, что на них есть, и при желании ссылки на полные текстовые версии документации. Модель получает суть без шума.

Формат намеренно простой. Он начинается с заголовка H1 с названием проекта, затем короткое цитата-резюме, а далее разделы со ссылками, упорядоченные по важности. Есть и соглашение llms-full.txt, которое собирает всю документацию в один файл.

Стоит быть честным: это пока предлагаемый стандарт, а не то, что крупные провайдеры официально гарантируют читать. Тем не менее внедрить его имеет смысл: это дёшево, не навредит и вписывается в более широкую работу над тем, чтобы ИИ-инструменты правильно вас понимали и цитировали. Мы рассматриваем его как часть GEO, а не как отдельное чудо-средство.