llms.txt generator

Creează un llms.txt din sitemap-ul tău ca modelele lingvistice să găsească ce merită citit

Introdu un site pentru a-i genera llms.txt

Cităm pagina ta principală și sitemap.xml, apoi creăm un draft markdown cu paginile care merită citite.

llms.txt și cât să crezi din el

Ideea, propusă de Jeremy Howard în 2024, este simplă: un fișier markdown la /llms.txt care spune unui model lingvistic ce pagini de pe site-ul tău merită citite. Robots.txt spune ce nu poate atinge un crawler; llms.txt spune ce ar trebui să prioritizeze.

Poziția sinceră privind adoptarea

Niciun furnizor major de AI nu s-a angajat să îl citească. Oricine îți spune că llms.txt e necesar pentru vizibilitatea AI vinde ceva. Ce e adevărat: adoptarea se răspândește printre site-urile de documentație și uneltele pentru dezvoltatori, fișierul este static și nu costă nimic să fie servit, iar dacă convenția se menține, tu deja ești acolo.

E un pariu ieftin pe o convenție plauzibilă. Merită zece minute, nu un proiect.

Ce crește cu adevărat vizibilitatea AI

În ordine: să permiți crawlerelor să acceseze pagina, apoi să ai conținut structurat astfel încât să poată fi extras un răspuns clar. Un fișier cu URL-urile tale nu ajută dacă OAI-SearchBot este interzis, sau dacă fiecare secțiune are nevoie de trei paragrafe ca să ajungă la subiect.

Verifică primul cu Verificatorul de crawler AI și al doilea cu Verificatorul de vizibilitate AI de asemenea.

Curăță-l

Generăm din sitemap pentru că e singura listă completă disponibilă, dar sitemap-ul urmărește completitudinea, iar llms.txt selectivitatea. Douăzeci de pagini care răspund cu adevărat bat patru sute care includ arhiva de taguri. Șterge cu generozitate și scrie o descriere reală, pe un rând, în partea de sus.

Întrebări frecvente

Ce este llms.txt?
O convenție propusă, publicată de Jeremy Howard în 2024: un fișier markdown la /llms.txt care listează paginile site-ului tău cele mai importante de citit, astfel încât un model lingvistic care accesează site-ul să găsească conținutul esențial fără să parcurgă navigația, bannerele de cookie-uri și footer-ele.
Companiile AI chiar îl citesc?
Nu în mod sigur, și merită să fim sinceri în privința asta. Niciun furnizor major de AI nu s-a angajat să respecte llms.txt. Adoptarea crește printre site-urile de documentație și uneltele pentru dezvoltatori, iar costul este un fișier static. Consideră-l o miză ieftină pe o convenție, nu ceva cu rezultate măsurabile azi.
Unde se pune fișierul?
La rădăcina domeniului tău: https://example.com/llms.txt. Unele site-uri publică și llms-full.txt care conține textul complet al paginilor cheie în loc de linkuri către ele.
De ce doar primele 100 URL-uri?
Pentru că un llms.txt util este selectiv, nu exhaustiv. Un dump de sitemap cu 4.000 URL-uri anulează scopul - fișierul există pentru a spune care pagini contează. Consideră ce generăm ca un draft de pornire și taie-l.
Este același lucru cu un sitemap?
Nu. Un sitemap este XML pentru crawlerele de căutare și urmărește completitudinea. llms.txt este markdown pentru modelele lingvistice și urmărește selectivitatea, cu spațiu pentru o descriere care explică ce este site-ul și de ce contează o anumită pagină.