llms.txt: was die Datei bringt und ob deine Website sie braucht

Was eine llms.txt ist

Den Vorschlag hat der Informatiker Jeremy Howard am 3. September 2024 veröffentlicht. Die Datei liegt unter deine-domain.de/llms.txt und ist in Markdown geschrieben, einem einfachen Textformat mit Überschriften und Listen. Pflicht ist laut Vorschlag nur eine Überschrift mit dem Namen der Website. Üblich sind dazu eine kurze Zusammenfassung und Abschnitte mit Links auf die wichtigsten Seiten, auf Wunsch mit einer knappen Erklärung (llmstxt.org). Gedacht ist die Datei laut Howard vor allem für den Moment, in dem ein KI-System eine Frage beantwortet, und weniger für das Training von Sprachmodellen.

Im August 2026 erschien eine zweite Fassung. Sie regelt vor allem, wie KI-Systeme zu einer Seite eine Fassung in Markdown finden, etwa über einen Verweis im Kopf der Seite (llmstxt.org, Änderungen). Ein offizieller Standard ist die llms.txt auch damit nicht, sondern ein offener Vorschlag. Eine Größengrenze oder Regeln zum KI-Training enthält die Spezifikation nicht.

Mit der robots.txt und der sitemap.xml hat die llms.txt vor allem den Ort gemeinsam. Die robots.txt legt fest, welche Crawler was abrufen dürfen, und ist seit 2022 als Standard der Internet-Normungsorganisation IETF beschrieben (RFC 9309). Die sitemap.xml listet die Seiten auf, die Suchmaschinen finden sollen, und Google wertet sie aus (Google). Die llms.txt erlaubt und verbietet dagegen nichts: Sie ist ein Angebot an KI-Systeme, das diese nutzen können oder eben nicht.

Wer die Datei tatsächlich liest

Google ist eindeutig. In seinem Leitfaden zu den KI-Funktionen der Suche, zuletzt aktualisiert am 10. Juli 2026, schreibt Google, für die Google-Suche einschließlich ihrer KI-Funktionen brauche man keine neuen maschinenlesbaren Dateien oder KI-Textdateien, weil die Suche selbst sie nicht nutzt. Wer für andere Dienste eine llms.txt pflegen will, könne das tun; der Sichtbarkeit in der Google-Suche schade das nicht, es helfe ihr aber auch nicht (Google). Gary Illyes von Google sagte 2025 laut einem Teilnehmer der Google-Konferenz Search Central Deep Dive, Google unterstütze die Datei nicht und plane das auch nicht (Search Engine Land). Sein Kollege John Mueller schrieb auf Reddit, ihr Nutzen sei „rein spekulativ“ (Search Engine Journal, Bericht vom 2. Juni 2026), und erklärte im Google-Podcast „Search Off the Record“, ein KI-System könne den Angaben einer Website über sich selbst nicht trauen, um sie von anderen zu unterscheiden (Search Engine Journal).

Für Verwirrung sorgt ein anderes Google-Werkzeug. Das Chrome-Team hat dem Prüfprogramm Lighthouse im Mai 2026 eine experimentelle Kategorie für KI-Agenten im Browser hinzugefügt, die auch nach einer llms.txt sucht. Fehlt die Datei, gilt die Prüfung als „nicht anwendbar“; bemängelt wird nur, wenn der Server beim Abruf einen Fehler meldet (Chrome for Developers). Mit dem Ranking in der Suche hat diese Prüfung nichts zu tun.

OpenAI und Anthropic erklären auf ihren Seiten für Website-Betreiber ausführlich, mit welchen Crawlern sie arbeiten und wie man diese über die robots.txt steuert; die llms.txt kommt dort als Steuerungsmittel nicht vor (OpenAI, Anthropic). Beide stellen zwar selbst eine llms.txt für ihre Entwicklerdokumentation bereit, ebenso Google für die Dokumentation seiner Gemini-Schnittstelle (llmstxt.org). Dass ihre Systeme die Dateien anderer Websites für Antworten auswerten, hat bis Oktober 2026 aber kein großer KI-Anbieter erklärt; eine solche Aussage haben wir bei unserer Recherche nicht gefunden.

Messungen passen dazu. Der SEO-Werkzeughersteller Ahrefs hat für Mai 2026 die Zugriffe auf 137.210 Domains ausgewertet, die sein Analysewerkzeug nutzen. 28 % davon hatten eine llms.txt; Ahrefs nennt das eine Obergrenze, weil seine Kunden technisch interessierter sind als der Durchschnitt. 97 % dieser Dateien wurden im ganzen Monat nicht ein einziges Mal abgerufen. Die größte einzelne Gruppe unter den Abrufern waren SEO-Prüfwerkzeuge mit 21,7 % der Abrufe, rund die Hälfte davon Ahrefs' eigene Crawler; KI-Bots aller Art kamen zusammen auf 19,5 %, unter ihnen GPTBot von OpenAI und das Programmierwerkzeug Claude Code (Ahrefs). Eine Auswertung von SE Ranking mit rund 300.000 Domains fand die Datei bei 10 % und keinen messbaren Zusammenhang damit, wie oft KI-Systeme eine Domain zitieren (Search Engine Journal). Beim gemeinnützigen Webarchiv Common Crawl lieferten im Juli 2026 knapp 12 % der abgefragten Hosts unter /llms.txt eine Textdatei, gut zwei Drittel davon aus Vorlagen, vor allem von Baukästen und Plugins. Für das ganze Web ist diese Stichprobe laut Common Crawl nicht repräsentativ; das HTTP Archive kam für 2025 auf rund 2 % (Common Crawl).

Dass SEO-Prüfwerkzeuge zu den häufigsten Abrufern gehören, erklärt nach unserer Einschätzung einen Teil des Rummels. Der Site Audit von Semrush etwa meldet seit Juli 2025, wenn eine llms.txt fehlt (Semrush), und auch Mueller sah bei einem eigenen Test mit Markdown-Fassungen seiner Seiten nur Abrufe von SEO-Werkzeugen, keine von KI-Suchdiensten (TechWyse). Ein Hinweis im Prüfbericht sagt also nichts darüber, ob ChatGPT oder Google deine Website besser verstehen.

Wann sie sich lohnen kann und wann nicht

Nutzen hat die Datei nach dem bisherigen Stand dort, wo Programme gezielt Dokumentation lesen: bei Software, Programmierschnittstellen und großen Hilfebereichen. Ahrefs sieht in Programmier-Agenten wie Claude Code die Nutzer, die der gedachten Zielgruppe am nächsten kommen; Claude Code rief die Dateien häufiger ab als die meisten KI-Such- und Assistenzdienste (Ahrefs). Google stellt die Dokumentation von Google Search Central seit Mai 2026 zusätzlich als Markdown bereit, laut Mueller für Entwickler mit KI-Werkzeugen und ausdrücklich nicht für die Suche (Search Engine Roundtable). Einen möglichen Nutzen sieht Mueller außerdem, wenn ein KI-Agent schon auf einer Website ist und dort etwas erledigen soll (Search Engine Journal).

Für die Website eines Handwerksbetriebs, einer Praxis, einer Kanzlei oder eines kleinen Shops gibt es dagegen keinen belegten Nutzen. Die Zeit steckst du besser in Inhalte, nach denen deine Kunden wirklich suchen, und in eine Technik, die Google und die KI-Suchdienste nicht versehentlich aussperrt (unsere Einschätzung). Was nachweislich zählt, wenn deine Website in ChatGPT oder Googles KI-Übersichten auftauchen soll, haben wir im Beitrag zur GEO-Optimierung zusammengetragen.

Vielleicht hast du schon eine: so prüfst du sie

Ruf in deinem Browser deine-domain.de/llms.txt auf. Viele Websites haben die Datei, ohne dass jemand sie bewusst angelegt hat. Wix erzeugt und pflegt sie automatisch, sobald eine Website einen bezahlten Tarif, eine eigene Domain und die Freigabe für Suchmaschinen hat (Wix). Beim WordPress-Plugin All in One SEO ist die Funktion laut Hilfeseite von Anfang an eingeschaltet (All in One SEO). Yoast SEO bietet sie seit Juni 2025 auch in der kostenlosen Fassung an und erneuert die Datei wöchentlich (Search Engine Journal, Yoast); Rank Math hat dafür ein eigenes Modul (Rank Math).

Ist die Datei in Ordnung, kannst du sie lassen. Ist sie fehlerhaft und du willst keine Zeit hineinstecken, schalte die Funktion ab; in der Google-Suche hat das laut Google keine Folgen (Google).

Was eine llms.txt kostet

Mit Yoast SEO und All in One SEO kostet die Datei nichts, auch in den Gratisfassungen (All in One SEO); bei Wix kostet sie nichts extra, setzt dort aber einen bezahlten Tarif voraus. Für Shopify gibt es Apps; eine davon ist bis zu je zehn Produkten, Kollektionen, Blogs und Seiten kostenlos und kostet sonst 4,99 US-Dollar alle 30 Tage (Shopify App Store). Von Hand braucht eine Datei für eine kleine Website mit einer Handvoll wichtiger Seiten nach unserer Einschätzung weniger als eine Stunde.

Angeboten wird sie trotzdem gegen Geld, als Einzelleistung oder im Paket. Zwei Beispiele mit veröffentlichtem Preis, abgerufen am 24.10.2026: Borban verlangt 79 € brutto für eine individuelle Datei, der Einbau kostet ab 49 € brutto zusätzlich; der Anbieter schreibt selbst, die Datei sei weder Ranking-Booster noch Zugriffssperre (Borban). Lohmann Marketing nennt 249 € inklusive Mehrwertsteuer und Einbindung und wirbt mit besserer Sichtbarkeit in KI-Antworten; einen Beleg dafür nennt die Seite nicht (Lohmann Marketing). In Paketen zur GEO-Optimierung ist die llms.txt oft ein Baustein unter vielen; Beispiele mit Preisen findest du im Beitrag zur GEO-Optimierung.

Für eine einzelne Datei mehr als eine kleine Pauschale zu zahlen, lohnt sich nach unserer Einschätzung nicht. Hast du ohnehin einen Wartungsvertrag, kann dein Dienstleister die Datei mitprüfen, wenn du sie behalten willst.

KI-Training widersprechen: Dafür ist die robots.txt da

Viele Website-Betreiber wollen nicht, dass ihre Texte und Bilder in das Training von KI-Modellen einfließen. Die llms.txt hilft dabei nicht, denn sie ist eine Einladung und kein Verbot. Rechtlich gilt in Deutschland § 44b des Urheberrechtsgesetzes: Rechtmäßig zugängliche Werke dürfen automatisiert ausgewertet und dafür kopiert werden, das sogenannte Text und Data Mining, solange der Rechteinhaber sich das nicht vorbehalten hat. Bei Inhalten im Internet wirkt ein solcher Vorbehalt nur, wenn er in maschinenlesbarer Form erfolgt (§ 44b UrhG).

Was das genau heißt, ist noch nicht abschließend geklärt. Das Oberlandesgericht Hamburg hat am 10. Dezember 2025 entschieden, dass ein gemeinnütziger Verein ein Foto für einen Datensatz zum Training von KI herunterladen durfte. Den Vorbehalt, den die Bildagentur in normaler Sprache in ihre Nutzungsbedingungen geschrieben hatte, hielt das Gericht für das Jahr 2021 nicht für maschinenlesbar; ob das heute anders zu sehen ist, ließ es offen und hat die Revision zum Bundesgerichtshof zugelassen (Az. 5 U 104/24; Kanzlei Dr. Bahr, urheber.info). Gestützt hat es sich zusätzlich auf die Ausnahme für die wissenschaftliche Forschung (§ 60d UrhG), gegen die ein Vorbehalt nicht hilft (Jan Ehlers); auf kommerzielle KI-Anbieter lässt sich das Urteil deshalb nicht ohne Weiteres übertragen. Der Bundesgerichtshof hat am 3. September 2026 verhandelt und angedeutet, den Fall zunächst dem Europäischen Gerichtshof vorzulegen; entschieden ist noch nichts (Az. I ZR 281/25; urheber.info).

Maschinenlesbar und von den großen Anbietern anerkannt sind heute vor allem Regeln in der robots.txt. Für das Training nennen die Anbieter eigene Namen: GPTBot bei OpenAI, ClaudeBot bei Anthropic und Google-Extended für Googles Gemini-Modelle. Google-Extended ist nur ein Steuerungseintrag ohne eigenen Crawler: Damit schließt du die Nutzung für Training und Grounding aus, auf die Google-Suche wirkt er laut Google nicht (OpenAI, Anthropic, Google). Wer diese Einträge sperrt, die Such-Crawler der Dienste aber zulässt, kann in deren Suchfunktionen weiter auftauchen. Aus Googles KI-Übersichten hält dich Google-Extended deshalb nicht heraus, denn sie gehören zur Suche (unsere Ableitung aus Googles Angaben). Welcher Crawler wofür zuständig ist und wie du dich aus Googles KI-Funktionen abmeldest, steht im Beitrag zur GEO-Optimierung.

Zwei Einschränkungen: Eine Sperre wirkt nur auf künftige Abrufe; Anthropic etwa spricht davon, künftige Inhalte aus dem Training herauszuhalten (Anthropic). Und neben den KI-Anbietern sammeln auch andere, etwa das frei verfügbare Webarchiv Common Crawl, dessen Crawler CCBot du ebenfalls über die robots.txt aussperren kannst (Common Crawl).

Die großen Anbieter haben auch einen rechtlichen Grund, sich daran zu halten. Die KI-Verordnung verlangt von Anbietern von KI-Modellen mit allgemeinem Verwendungszweck, etwa den Modellen hinter ChatGPT oder Claude, eine Strategie, mit der sie Vorbehalte von Rechteinhabern erkennen und beachten (Art. 53 KI-VO). Wer den freiwilligen Verhaltenskodex der EU vom 10. Juli 2025 unterschrieben hat, hat sich außerdem verpflichtet, Crawler einzusetzen, die die robots.txt lesen und befolgen (EU-Kommission, Slaughter and May). Ob zusätzlich ein Hinweis in Impressum oder Nutzungsbedingungen etwas bringt, ist nach dem Hamburger Urteil offen.

Läuft deine Website über Cloudflare, schau auch dort in die Einstellungen. Seit Juli 2026 lassen sich KI-Crawler dort getrennt nach Suche, Agenten und Training erlauben oder sperren. Cloudflare behandelt Crawler, die zugleich für Suche und Training arbeiten, nach der strengsten Einstellung; wer dort das Training sperrt, kann damit laut Cloudflare auch Googlebot, Applebot und Bingbot aussperren. Für Domains, die seit dem 15. September 2026 neu zu Cloudflare kommen, sind Trainings- und Agenten-Crawler auf Seiten mit Werbung standardmäßig gesperrt (Cloudflare). Prüf nach jeder Änderung, ob deine Seiten noch in Google erscheinen, oder lass das von deinem Dienstleister einrichten.

Woran du ein Angebot mit llms.txt prüfst

Steht die llms.txt in einem Angebot, ist das kein Grund zur Ablehnung. Sie sollte aber nicht der Grund sein, warum du zahlst. Diese Punkte helfen beim Prüfen:

Hilfe für Website und KI-Suche finden

Suchst du jemanden, der die Technik deiner Website prüft, Regeln für Crawler sauber einrichtet oder deine Inhalte für Google und KI-Suchdienste verbessert, dann beschreib dein Vorhaben möglichst genau: was geprüft oder geändert werden soll, mit welchem System deine Website läuft, etwa WordPress, Wix oder Shopify, und welches Budget du einplanst.

Das geht bei Kontaktpfad, unserem eigenen Angebot, kostenlos. Unter Projekt beschreiben legst du dein Vorhaben an, und Dienstleister mit passendem Fachgebiet wie SEO oder Webentwicklung können sich anschließend bei dir melden. Willst du selbst suchen, grenzt du im Verzeichnis nach Fachgebiet und Standort ein.