Wat is llms.txt en heb je het echt nodig?

Wat is llms.txt?

LLMs.txt is een tekstbestand dat is ontworpen om Large Language Models (LLM’s) duidelijk te maken waar de belangrijkste en meest relevante informatie op je website te vinden is. In dit bestand kun je verwijzen naar belangrijke pagina’s, documentatie en andere waardevolle content. Hierdoor zouden theoretisch gezien AI-systemen je website beter kunnen begrijpen, informatie makkelijker interpreteren en mogelijk meenemen in AI-zoekresultaten of gegenereerde antwoorden. Dit is geen gek idee: we gebruiken namelijk al soortgelijke bestanden op onze website om zoekmachines onze website en content beter te laten begrijpen. Denk maar aan robots.txt, waarmee we onder andere aangeven welke delen van de website wel of niet bezocht mogen worden, en natuurlijk sitemaps, waarin we alle belangrijke URL’s van onze websites verzamelen. 

LLMs.txt zou dus een goede toevoeging zijn, vooral nu het gebruik van AI-zoekmachines sterk aan het groeien is. Hierdoor wordt llms.txt soms ook ingezet als salestechniek om bij bedrijven binnen te komen. Dit wordt gedaan door in te spelen op de onzekerheid die is ontstaan door de snelle groei van AI-zoekmachines en de angst om hierin achter te blijven. 

Zo werken llms.txt bestanden

Een llms.txt-bestand is in de basis een Markdown-bestand. Dat betekent dat het een tekstbestand is waarin je met gewone tekst en eenvoudige opmaak de informatie overzichtelijk kunt structureren. Je zet er zaken in zoals de algemene bedrijfsomschrijving, de belangrijkste pagina’s op je website, de diensten en/of producten van je bedrijf en jouw USP’s. Deze groepeer je aan de hand van H2-koppen. Kortom, je zet de belangrijkste en meest relevante informatie erin van je website, zodat AI-systemen je content beter kunnen begrijpen en interpreteren. Het bestand zet je vervolgens in de hoofdmap/root van je website. Een LLM zou dan theoretisch het bestand kunnen lezen wanneer het je website bezoekt, om beter je website en de content erop te begrijpen.

Heb je llms.txt nodig?

Met deze informatie zou je in eerste instantie denken dat dit een waardevolle toevoeging is aan je website. Maar is dit ook zo? Nou, niet echt. Althans, op dit moment nog niet. Dt is waarom: dit bestand is een voorgestelde standaard door llmstxt.org om LLM’s van informatie te voorzien om jouw website te lezen en te begrijpen. Het probleem is dat het voorlopig slechts een voorgestelde standaard is. Iedereen kan in principe met een eigen standaard komen, maar als niemand het ermee eens is en niemand het gebruikt, heeft het geen meerwaarde. Dit is dus ook het geval met llmss.txt: er is geen grote AI-zoekmachine die op het moment llms.txt ondersteunt. ChatGPT niet, Gemini niet en Claude niet. Uit recent onderzoek van Ahrefs is gebleken dat van 137.000 geanalyseerde websites, in 97% van de gevallen het llms.txt bestand nooit werd gelezen. Dit kan uiteraard in de toekomst nog veranderen, maar voorlopig zal dit bestand je niet helpen. Om het even om te draaien: kan het kwaad om dit bestand te gebruiken? Nee, dat niet. Het gebruik van dit bestand heeft in ieder geval geen negatieve impact op je website of de vindbaarheid ervan.

LLMS.txt en Lighthouse: de tegenstrijdigheid van Google

Het ironische is echter dat, ondanks dat Google heeft aangegeven dat het llms.txt bestand niet nodig is voor zichtbaarheid in AI, Google Lighthouse (de tool van Google waarmee de kwaliteit van een webpagina wordt gecontroleerd) de aanwezigheid van het bestand wel controleert. Dit wordt gedaan binnen de experimentele Agentic Browsing categorie van de tool, waarbij AI-agents zelfstandig door een website navigeren, informatie verzamelen en acties uitvoeren.. Het controleren van de aanwezigheid van het bestand door Google is echter geen reguliere SEO-check of ranking factor.

Het idee van het llms.txt bestand helpt in dit geval niet om per se beter gevonden te worden, maar zou AI-agents op je website wel kunnen helpen om je website beter te begrijpen. Hierdoor dient het bestand meer als een korte, leesbare samenvatting van je website voor machines. 

Zo word je zichtbaarder in AI

Als llms.txt je zichtbaarheid in AI-zoekmachines niet direct vergroot, wat werkt dan wel? In principe moet je gewoon goede SEO (blijven) doen: schrijf unieke, gebruiksvriendelijke en behulpzame content die aansluit bij de zoekintentie van je websitebezoekers. Zorg voor een duidelijke en logische structuur van je tekst, waarin belangrijke vragen direct worden beantwoord. Maak daarnaast goed duidelijk op je website waar je expertise ligt: waar je bedrijf voor staat, wat je doet en waarom bezoekers jou kunnen vertrouwen. Denk hierbij ook aan testimonials, recensies en cases. Bouw autoriteit op buiten je eigen website, middels een Google Bedrijfsprofiel en vermeldingen op externe, betrouwbare en relevante websites. Kortom, je vergroot je zichtbaarheid in AI vooral door te blijven investeren in sterke SEO.