Ratgeber
Was ist llms.txt?
llms.txt ist eine vorgeschlagene Textdatei im Root-Verzeichnis einer Website, die KI-Systemen eine kompakte, strukturierte Zusammenfassung der wichtigsten Inhalte liefert, gedacht als Pendant zu robots.txt und sitemap.xml, nur für LLM-Konsum statt für klassisches Crawling.
Was ist llms.txt?
llms.txt ist eine als Markdown formatierte Textdatei, die unter /llms.txt im Root einer Domain liegt und einem KI-System in komprimierter Form mitteilt, worum es auf einer Website geht und welche Seiten am wichtigsten sind. Die Idee dahinter: Ein Sprachmodell hat beim Beantworten einer Anfrage nur begrenzt Platz und Zeit, um Inhalte zu verarbeiten. Eine kuratierte Zusammenfassung soll ihm helfen, schneller die relevanten Informationen zu finden, statt eine ganze Website durchsuchen zu müssen.
Die Datei folgt keiner behördlichen Norm, sondern ist ein von der Community vorgeschlagenes Format, das seit seiner Einführung wachsend, aber uneinheitlich aufgegriffen wird.
Worin unterscheidet sich llms.txt von robots.txt und sitemap.xml?
robots.txt steuert den Zugriff (wer darf welche Bereiche crawlen), sitemap.xml listet vollständig alle vorhandenen URLs auf, llms.txt dagegen ist eine kuratierte inhaltliche Zusammenfassung der wichtigsten Seiten. Die drei Dateien ergänzen sich, ersetzen sich aber nicht gegenseitig.
| Datei | Zweck | Adressat |
|---|---|---|
| robots.txt | Zugriffssteuerung: welcher Crawler darf was besuchen | Alle automatisierten Crawler, inkl. KI-Crawler wie GPTBot |
| sitemap.xml | Vollständige, technische Liste aller URLs | Suchmaschinen-Crawler |
| llms.txt | Kuratierte, kurze Inhaltszusammenfassung | Sprachmodelle beim Verarbeiten von Anfragen |
Eine llms.txt-Datei ersetzt weder eine funktionierende robots.txt noch eine vollständige sitemap.xml. Sie kommt ergänzend hinzu, wenn beide bereits vorhanden und korrekt konfiguriert sind.
Wie ist eine llms.txt-Datei aufgebaut?
Eine llms.txt-Datei ist reines Markdown mit einer festen groben Struktur: einer H1-Überschrift mit dem Namen der Website, einer kurzen Beschreibung darunter, und anschließend Abschnitten mit Links zu den zentralen Unterseiten, oft kurz kommentiert.
Typischerweise folgt sie diesem Muster: eine # Titel-Zeile mit dem Namen des Anbieters, ein kurzer Absatz mit der Kernbeschreibung des Angebots, und darunter Listen mit Links (etwa zu Kursangeboten, Kontaktseiten oder Hintergrundinformationen), jeweils mit einem Satz Kontext versehen. Die Datei bleibt bewusst kurz und komprimiert, im Gegensatz zur vollständigen Website.
Wird llms.txt von KI-Anbietern offiziell unterstützt?
Nein, jedenfalls nicht durchgängig: llms.txt ist ein aufkommender, wachsend adoptierter De-facto-Standard, aber keine von allen großen KI-Anbietern offiziell bestätigte, garantiert ausgewertete Konvention, anders als robots.txt, dessen Beachtung länger etabliert ist.
Das bedeutet in der Praxis: Eine llms.txt-Datei einzurichten schadet nicht und folgt einer plausiblen, offen dokumentierten Idee, ist aber keine Garantie dafür, dass ein bestimmtes KI-System die Datei tatsächlich liest oder ihr Gewicht beimisst. Sie ersetzt keine grundlegend saubere, gut strukturierte Website, sondern kann sie höchstens sinnvoll ergänzen. Wie sich das in die größeren Gründe für fehlende KI-Sichtbarkeit einordnet, beschreibt der Artikel Warum nennt ChatGPT meine Schule nicht?. Welche Datenquellen und Abrufwege dieser Index selbst für seine Messungen nutzt, steht unter Datenquellen.
Redaktioneller Hinweis: Dieser Artikel erklärt allgemein dokumentierte Funktionsweisen von KI-Suchsystemen. Er zitiert keine Einzelstudie und trifft keine Tatsachenbehauptung über einen konkreten Anbieter, sondern beschreibt technische Grundlagen und ordnet den Status von llms.txt ehrlich als aufkommenden, nicht garantiert unterstützten Standard ein.