llms.txt 2026: Was die Serverlogs wirklich zeigen
Kaum eine Datei hat in der SEO- und GEO-Szene der letzten 18 Monate so viel Diskussion ausgelöst wie llms.txt. Zeit, die Marketingfolien beiseitezulegen und in die Serverlogs zu schauen — in fremde und in unsere eigenen.
Kaum eine Datei hat in der SEO- und GEO-Szene der letzten 18 Monate so viel Diskussion ausgelöst wie llms.txt. Die einen nennen sie das "robots.txt für KI", die anderen vergleichen sie mit dem längst beerdigten Keywords-Meta-Tag. Zeit, die Marketingfolien beiseitezulegen und in die Serverlogs zu schauen — in fremde und in unsere eigenen.
Was ist llms.txt überhaupt?
llms.txt ist eine Markdown-Datei im Root einer Domain (https://example.com/llms.txt). Sie soll KI-Systemen eine kuratierte Übersicht der wichtigsten Inhalte einer Website geben: Links mit Ein-Zeilen-Beschreibungen, optional eine Kurzbeschreibung der Marke. Der Vorschlag stammt von Jeremy Howard und wurde im September 2024 veröffentlicht. Anders als robots.txt regelt llms.txt keinen Zugriff — sie ist ein redaktionelles Angebot: "Liebe KI, das hier ist wichtig."
Das Versprechen
Die Erzählung im GEO-Marketing geht so: Wer llms.txt ausliefert, wird von KI-Crawlern besser verstanden, häufiger zitiert und bekommt mehr Traffic aus ChatGPT, Claude, Perplexity & Co. Klingt plausibel. Lässt sich aber messen.
Die Datenlage 2026
Adoption: rund jede zehnte Website. Eine SE-Ranking-Studie über 300.000 Domains kam Anfang 2026 auf eine Adoptionsrate von etwa 10 %. Nach 18 Monaten Industriediskussion ist das solide, aber kein Durchbruch. Interessant: Große Marken adoptieren deutlich häufiger als der Durchschnitt — llms.txt ist derzeit eher ein Sophistication-Signal als ein Standard.
Crawler-Interesse: nahe null. Die härtesten Zahlen kommen aus Log-Analysen. Eine Auswertung von über 500 Millionen KI-Bot-Events über 90 Tage fand gerade einmal 408 direkte Zugriffe auf llms.txt-Dateien. Eine zweite, unabhängige Messung über drei Monate und 60.000+ KI-Bot-Hits kam auf 0,1 % der Visits. GPTBot, ClaudeBot, PerplexityBot und Google-Extended crawlen ganz überwiegend das normale HTML — nicht die kuratierte Abkürzung.
Traffic-Effekt: nicht nachweisbar. Search Engine Land hat zehn Websites jeweils 90 Tage vor und nach der Implementierung getrackt. Acht zeigten keine messbare Veränderung. Die zwei Sites mit Traffic-Plus hatten im gleichen Zeitraum andere Maßnahmen laufen (z. B. eine große PR-Kampagne) — Korrelation, nicht Kausalität.
Die Plattformen sind gespalten. Google hat im Juli 2025 offiziell erklärt, llms.txt nicht zu unterstützen — John Mueller verglich die Datei sogar mit dem Keywords-Meta-Tag. Anthropic und Perplexity haben Support dagegen öffentlich bestätigt, OpenAI verhält sich beobachtbar, aber ohne Commitment. Und: Yoast SEO generiert llms.txt inzwischen automatisch für WordPress-Sites — wenn ein Plugin mit Millionen Installationen ein Feature standardmäßig ausrollt, beginnt Mainstream-Adoption, ob die Crawler wollen oder nicht.
Unsere eigenen Logs
Theorie ist gut, eigene Daten sind besser. Wir haben die Nginx-Logs von robotcheck.coffee ausgewertet:
- KI-Bot-Requests gesamt (20. Mai – 11. Juni 2026, 22 Tage): 1.252
- davon Zugriffe auf
/llms.txt: 0 - häufigste KI-User-Agents: GPTBot (576), ClaudeBot (430), OAI-SearchBot (123), PerplexityBot (43), CCBot (40)
Kein einziger der 1.252 KI-Bot-Zugriffe zielte auf /llms.txt. Die 33 Treffer auf diesem Pfad stammen aus Monitoring und eigenen Tests. Ergebnis: KI-Bots crawlen das normale HTML — die kuratierte Abkürzung wird konsequent ignoriert.
Das ist eine kleine Website mit überschaubarem Traffic — keine 500-Millionen-Studie. Aber genau deshalb ist das Ergebnis relevant: Es zeigt, wie die Lage für eine typische kleine bis mittlere Site aussieht, nicht für Stripe oder Cloudflare.
Wofür llms.txt 2026 wirklich taugt
Die ehrliche Einordnung: llms.txt ist (noch) kein SEO- oder GEO-Hebel. Die Datei ist eine Wette auf das Agentic Web — eine standardisierte, maschinenlesbare Oberfläche, auf der KI-Agenten künftig navigieren könnten. Schon heute messbar nützlich ist sie vor allem für Developer-Dokumentation: KI-gestützte IDEs und Coding-Agenten nutzen llms.txt tatsächlich, um Docs effizient zu lesen.
Der Aufwand ist minimal, Schaden entsteht keiner. Aber wer glaubt, mit einer einzelnen Markdown-Datei seine KI-Sichtbarkeit zu drehen, misst am falschen Ende.
Was stattdessen wirkt
KI-Crawler konsumieren das, was alle Crawler konsumieren: das normale HTML. Entscheidend ist deshalb, ob diese Ebene sauber ist —
- robots.txt, die KI-Bots nicht versehentlich aussperrt (oder bewusst steuert)
- Schema.org-Markup, das Inhalte maschinell interpretierbar macht
- saubere HTML-Struktur mit semantischen Überschriften
- Canonical-Tags, Open Graph, Alt-Texte, Performance
Das sind genau die Kriterien, die unser kostenloser Check prüft. llms.txt ausliefern: ja, gern, kostet eine halbe Stunde. Aber erst, wenn das Fundament steht.