llms.txt: какво представлява, какво не е, и трябва ли ви такъв файл

Текстовото поле, което никой не обновяваше

Първият файл на Arc AI - llms.txt, живееше в текстово поле в административния панел, въвеждано ръчно и обновявано от никого. Адресът просто връщаше "не е намерено". Решението на проблема не беше по-добро напомняне, а генериране на файла от същите правила, които вече изграждат картата на сайта. Ето какво всъщност представлява llms.txt, какво не е, и дали си струва усилието.

Кратък файл без официална подкрепа

llms.txt е предложение, не стандарт. Джереми Хауърд го предлага на 3 септември 2024 г. на llmstxt.org. Няма управляващ орган, няма график за версии, няма при кого да се регистрирате.

Самият файл е обикновен Markdown в основата на домейна, предназначен за AI инструменти и за хора, които го преглеждат директно. При сайт, изграден по този начин, той започва с името на компанията и обикновено описание, после насочва към страниците, които имат най-голямо значение: основните страници, най-новите 25 статии, категориите, групирани по език. Всяка връзка пази заглавието на страницата, към която сочи, така че френска страница ще получи заглавие на връзка на френски.

Не е robots.txt, не е карта на сайта, не е сигнал за класиране

Не е robots.txt, който казва на роботите какво могат да извличат. Не е карта на сайта, предназначена да бъде пълен, вместо подбран, списък с адреси. Не влияе на класирането и не контролира достъп до нищо. По-близо е до кратка презентация, подавана на машинен четец, и, четена по същия начин от човек, доста добро едностранично обобщение на бизнеса.

Разпространението е реално, но неравномерно: SE Ranking разгледа около 300 000 домейна и откри, че приблизително един на десет има файл llms.txt, 8% сред сайтовете с висок трафик, 10,5% сред средните.

Нито една голяма AI платформа не е потвърдила, че реално чете файла. Google са заявили публично, че AI Overviews и AI Mode работят с обичайните сигнали за търсене, не с llms.txt, и е сравнил файла със стария таг за мета ключови думи. Документацията на роботите на OpenAI и Perplexity покрива подробно robots.txt и изобщо не споменава llms.txt. Нито Anthropic, нито Microsoft са обявили поддръжка. SE Ranking тества дали файлът предсказва кои страници биват цитирани от AI инструменти; премахването му от техния модел направи модела по-точен, доста категоричен знак, че засега не е сигнал за цитиране. Това е състоянието към септември 2026 г.; разпространението се променя, така че проверете текущата поддръжка, преди да разчитате на нещо от това.

Реалният риск е разминаването

Нищо от това не прави llms.txt безполезен, само стеснява основанието да си направите такъв. Генериран правилно, той не струва почти нищо и служи също като чиста, четима карта на сайта. Поддържан ръчно, е задължение, а задълженията се пропускат.

Ръчно поддържан файл се разминава по два начина: изброява вече изтрити или преместени страници или пропуска всичко публикувано след последното отваряне на административния панел. Изграждането му на база същите правила за допустимост, които генерират картата на сайта, избягва и двата проблема. Чернова не се появява, докато не бъде публикувана, планирана публикация изчаква датата си, страница с noindex или пренасочена такава отпада автоматично и от двата файла. Един набор от правила, захранващ два резултата, означава, че те не могат да се разминат.

Самото генериране е евтино: на сайт, изграден по този начин, то се изпълнява при всяка заявка с 13 заявки към базата данни и около 37 милисекунди, кешира се за денонощие и се изчиства в момента, в който нещо се промени.

Кратък списък за проверка, преди да си направите труда

• решете дали си струва: евтино е, ако се генерира, задължение е, ако се поддържа ръчном
• генерирайте го от същите правила, които изграждат картата на сайта ви, вместо от отделен списък;
• пазете файла кратък и подбран - включете страниците, които имат значение, не всеки адрес на сайта;
• поставете обикновено описание на бизнеса близо до началото;
• прочетете готовия файл веднъж както непознат би го прочел и проверете дали наистина обяснява бизнеса.

Струва си да го направите веднъж, но както трябва

Все още не е потвърдена аудитория, която да чете llms.txt, и всеки, който обещава, че ще повлияе на видимостта ви в AI търсене, просто гадае. Онова, за което наистина е полезен, е по-скромно: подреден, актуален списък на това какво представлява един сайт и къде живеят важните му страници, направен веднъж и оставен сам да се обновява.