llms.txt
Een standaard bestand dat LLM's informeert over de inhoud en structuur van een website.
llms.txt is een voorgesteld standaardbestand (vergelijkbaar met robots.txt — bibliotheekterm) dat in de root van een website wordt geplaatst om large language models te informeren over de beschikbare content. Het biedt een gestructureerd overzicht van de website dat AI-modellen kunnen gebruiken om de site te begrijpen.
Wat bevat llms.txt?
Een llms.txt bevat typisch: een beschrijving van de website of organisatie, de belangrijkste pagina's en secties, contactinformatie, en instructies voor hoe AI-modellen de content mogen gebruiken. Het formaat is nog in ontwikkeling maar wordt steeds breder geadopteerd.
llms.txt en AEO
Het aanbieden van een llms.txt is een proactief signaal dat je website AI-gereed is. Het geeft LLM's directe context zonder dat ze je hele site hoeven te crawlen. Samen met robots.txt en Schema.org — bibliotheekterm vormt het een complete communicatielaag met AI-systemen.
Voorbeeld van een llms.txt bestand
# Bedrijfsnaam
> Korte beschrijving van de organisatie en wat de website biedt.
## Documentatie
- [API-documentatie](https://example.com/docs/api): Volledige REST API referentie
- [Handleidingen](https://example.com/docs/guides): Stapsgewijze handleidingen voor implementatie
- [FAQ](https://example.com/faq): Veelgestelde vragen en antwoorden
## Producten en diensten
- [Product A](https://example.com/products/a): Beschrijving van product A
- [Product B](https://example.com/products/b): Beschrijving van product B
- [Prijzen](https://example.com/pricing): Overzicht van prijsplannen
## Bedrijfsinformatie
- [Over ons](https://example.com/about): Missie, team en geschiedenis
- [Contact](https://example.com/contact): Contactgegevens en openingstijden
- [Blog](https://example.com/blog): Actuele artikelen en inzichten
## Optional
- [Technische specificaties](https://example.com/docs/specs): Gedetailleerde technische documentatie
- [Casestudies](https://example.com/cases): Praktijkvoorbeelden en resultatenVergelijking: llms.txt vs robots.txt vs sitemap.xml
| Kenmerk | llms.txt | robots.txt | sitemap — bibliotheekterm.xml |
|---|---|---|---|
| Doel | AI-modellen context geven over je site | Crawlers vertellen wat ze wel/niet mogen | Zoekmachines alle indexeerbare URL's tonen |
| Doelgroep | LLM's en AI-agents | Alle webrobots en crawlers | Zoekmachine-crawlers |
| Formaat | Markdown met links en beschrijvingen | Platte tekst met User-agent/Disallow regels | XML met URL-elementen |
| Locatie | /llms.txt (root) | /robots.txt (root) | /sitemap.xml (root, of via robots.txt) |
| Inhoud | Beschrijvingen, links naar belangrijke pagina's, context | Toegangsregels per crawler/pad | Lijst van URL's met metadata (lastmod, priority) |
| Bindend? | Nee, informatief | Conventie, niet juridisch bindend | Nee, suggestie aan crawlers |
| Status | Voorgestelde standaard, groeiende adoptie | Industriestandaard sinds 1994 | Industriestandaard (sitemaps.org protocol) |
Wat checkt onze scanner?
De scanner controleert of je website een llms.txt bestand aanbiedt op de juiste locatie (/llms.txt), of het bestand valide is en de verwachte structuur volgt, en of het relevante content bevat. Dit is onderdeel van de AEO — bibliotheekterm-score.
Veelgestelde vragen
Is llms.txt al een officiele standaard?
Nee, llms.txt is een voorgestelde standaard die in 2024 is geintroduceerd. Het formaat wordt actief ontwikkeld en steeds breder geadopteerd door organisaties. Hoewel er nog geen formele RFC of W3C-standaard is, groeit de consensus over het formaat snel.
Wat is het verschil tussen llms.txt en llms-full.txt?
Het llms.txt bestand bevat een beknopt overzicht met links naar de belangrijkste pagina's. Het optionele llms-full.txt bestand bevat de volledige content van die pagina's inline, zodat een LLM alles in een keer kan inlezen zonder extra verzoeken te doen. Dit is handig voor kleinere sites waar alle relevante content in een enkel bestand past.
Moet ik mijn hele website beschrijven in llms.txt?
Nee. Focus op de pagina's die het meest relevant zijn voor AI-interactie: je kernproducten/diensten, documentatie, veelgestelde vragen en contactinformatie. Denk eraan als een curated gids voor AI-modellen, niet als een volledige sitemap.
Hoe test ik of mijn llms.txt correct werkt?
Bezoek https://jouwdomein.nl/llms.txt in je browser om te controleren of het bestand bereikbaar is. Controleer of het Markdown-formaat correct is, of de links werken, en of de beschrijvingen zinvol zijn. Gebruik onze scanner om automatisch te controleren of je llms.txt aan de verwachte structuur voldoet.
Respecteren AI-modellen de instructies in llms.txt?
llms.txt is primair informatief, niet restrictief. Het is bedoeld om AI-modellen context te geven, niet om toegang te beperken (dat doe je met robots.txt). AI-modellen gebruiken de informatie in llms.txt om je site beter te begrijpen en relevantere antwoorden te genereren.
