Eine SEO-Verantwortliche öffnet am Montagmorgen die Server-Logs ihrer Unternehmensseite. Sie sieht GPTBot, ClaudeBot und PerplexityBot im Minutentakt. Ein Kollege hat am Wochenende eine Datei namens llms.txt ins Root-Verzeichnis gelegt und meint, das sei der neue Standard. Nur: Was genau steht da drin, und verhalten sich die Bots jetzt anders? Damit wird die Frage was ist llms.txt zum Start jeder ernsthaften GEO-Diskussion im Team.
Genau deshalb ist die Frage, was ist llms.txt, so relevant, bevor Sie die Datei einsetzen. Die Datei ist ein Vorschlag aus dem September 2024 und wird oft mit robots.txt verwechselt. Sie erfüllt aber einen anderen Zweck, und ihre Wirkung ist aktuell begrenzt. Dieser Glossar-Eintrag erklärt die Definition, den Aufbau und die wichtigsten Abgrenzungen. Eine Schritt-für-Schritt-Implementierung finden Sie in unserem llms.txt Einrichtungs-Leitfaden.
llms.txt Definition: eine kuratierte Inhaltsübersicht für Sprachmodelle
llms.txt ist eine Markdown-Datei im Root-Verzeichnis einer Website, die Sprachmodellen eine kuratierte Übersicht der wichtigsten Inhalte liefert. Der Vorschlag stammt von Jeremy Howard, Gründer von Answer.AI, und wurde am 3. September 2024 unter llmstxt.org veröffentlicht (Answer.AI, 2024). Die Idee: LLMs haben ein begrenztes Kontextfenster und verbrauchen bei HTML-Seiten viele Tokens für Navigation, Tracking-Skripte und Layout. Eine aufgeräumte Markdown-Version ist für die Modelle effizienter. Details finden Sie in unserem was ist LLM Traffic.
Adresse und Format sind festgelegt. Die Datei liegt unter /llms.txt, direkt neben robots.txt. Der Inhalt ist reines Markdown, keine proprietäre Syntax. Jede Zeile im eigentlichen Content-Teil folgt dem Muster [Titel](URL): Kurzbeschreibung. Damit können sowohl Menschen als auch Maschinen die Datei lesen.
Wie ist eine llms.txt aufgebaut?
Der Standard definiert eine klare Reihenfolge. Oben steht ein H1 mit dem Website- oder Produktnamen. Darunter folgt ein Blockquote mit einer kurzen Beschreibung, was die Seite tut. Anschließend kommen H2-Abschnitte, die thematische Gruppen bilden. Jeder Abschnitt enthält eine Liste von Markdown-Links zu den wichtigsten Seiten innerhalb dieser Gruppe. Details finden Sie in unserem was ist Model Readability Score.
Ein minimales llms.txt Beispiel sieht so aus:
Optional lässt sich ein H2-Block mit dem Titel "Optional" ergänzen. Inhalte in diesem Block gelten als nachrangig. Sprachmodelle mit knappem Kontextfenster dürfen sie überspringen.
llms.txt vs. llms-full.txt: der Unterschied
Die Spezifikation kennt zwei verwandte Dateien. llms.txt ist der Index, also die kuratierte Link-Liste. llms-full.txt dagegen enthält den kompletten Inhalt der verlinkten Seiten, ebenfalls in Markdown, aneinandergereiht in einer einzigen Datei. Anthropic pflegt beispielsweise beide Varianten unter docs.anthropic.com (Anthropic, 2025).
Wofür welche Datei. Der Index eignet sich für kleine Seiten und als Navigationshilfe. Die Full-Variante ist für Dokumentations-Portale gedacht, bei denen das Sprachmodell alle technischen Details in einem Durchgang laden soll. Beide Dateien sind freiwillig, und beide nutzen identisches Markdown.
llms.txt vs. robots.txt vs. sitemap.xml
Die drei Dateien werden oft verwechselt, erfüllen aber verschiedene Aufgaben. robots.txt regelt, wer crawlen darf. sitemap.xml listet alle URLs für Suchmaschinen-Bots auf. llms.txt kuratiert die wichtigsten Inhalte für LLM-Konsumenten. Sie sind komplementär, nicht konkurrierend.
Datei | Zweck | Adressaten | Verbindlich? |
|---|---|---|---|
| Crawl-Erlaubnis oder Sperre je User-Agent | Alle Crawler, klassisch und KI | Etablierter Quasi-Standard seit 1994, freiwillige Einhaltung |
| Vollständige URL-Liste mit Metadaten | Suchmaschinen-Crawler | Von Google, Bing und anderen unterstützt |
| Kuratierte Markdown-Übersicht der Kerninhalte | Sprachmodelle und AI-Assistenten | Community-Vorschlag seit 2024, kein IETF- oder W3C-Standard |
Eine gute Einrichtung pflegt alle drei Dateien nebeneinander. Mehr zur Crawler-Steuerung für KI-Bots lesen Sie in unserem Beitrag robots.txt für KI-Crawler.
Wer respektiert llms.txt aktuell?
Hier ist die ehrliche Einordnung: Die großen AI-Crawler ignorieren llms.txt bislang weitgehend. Es gibt keine offizielle Unterstützung durch OpenAI, Anthropic oder Perplexity. GPTBot, ClaudeBot, OAI-SearchBot, PerplexityBot, Google-Extended und CCBot greifen weiterhin auf HTML-Seiten zu und folgen robots.txt für Zugriffsregeln. Eine automatische Präferenz für die Markdown-Version gibt es nicht.
Trotzdem pflegen immer mehr Anbieter die Datei. Anthropic, Mintlify, Cloudflare, Vercel, ElevenLabs und Stripe veröffentlichen eigene llms.txt- oder llms-full.txt-Dateien (llmstxt.org Verzeichnis, 2025). Die Motive sind unterschiedlich: Vorbereitung auf künftige Unterstützung, saubere Markdown-Versionen für interne RAG-Systeme und Signalwirkung gegenüber der Entwickler-Community. Ein direkter Sichtbarkeits-Boost in ChatGPT oder Perplexity lässt sich aus der bloßen Existenz der Datei bislang nicht ableiten.
Drei verbreitete Irrtümer zu llms.txt
Irrtum 1: llms.txt ersetzt robots.txt. Falsch. llms.txt regelt keine Zugriffe, sondern bietet eine Inhaltsübersicht. Wer AI-Crawler blockieren oder erlauben will, nutzt weiterhin robots.txt mit User-Agent-Einträgen für GPTBot, ClaudeBot und Co. Details zu einzelnen Bots finden Sie im Artikel Was ist ClaudeBot.
Irrtum 2: llms.txt ist ein offizieller Standard. Falsch. Es ist ein Community-Vorschlag von Answer.AI, kein IETF- oder W3C-Dokument. Die Spezifikation lebt auf llmstxt.org und wird von Jeremy Howard gepflegt. Adoption und Regeln ändern sich ohne formalen Prozess.
Irrtum 3: Eine llms.txt sorgt automatisch für mehr Zitate in ChatGPT. Falsch. Aktuell verwenden die großen Sprachmodelle die Datei nicht gezielt für Zitationen. Sichtbarkeit in Generative Engines entsteht durch starke On-Page-Inhalte, Entity-Signale, Brand Mentions und crawlbare HTML-Seiten. llms.txt ist eine sinnvolle Ergänzung, kein Ranking-Hebel.
Wann llms.txt dennoch sinnvoll ist
Die Datei hat trotz begrenzter Crawler-Unterstützung mehrere pragmatische Einsatzfelder. Sie eignet sich überall dort, wo Inhalte sauber kuratiert in Sprachmodelle fließen sollen, ohne auf eine offizielle Crawler-Unterstützung zu warten.
Dokumentations-Portale. Entwickler laden
llms-full.txtdirekt in Cursor, Claude oder ChatGPT und arbeiten mit dem kompletten Kontext.Große Content-Sites. Unternehmen mit hunderten Seiten signalisieren Ordnung und markieren die kanonischen Einstiegspunkte für jedes Thema.
Interne RAG-Systeme. Wer eigene Assistenten betreibt, nutzt die Markdown-Version als saubere Indexquelle statt HTML zu parsen.
Zukunftssicherheit. Eine gepflegte Datei ist Vorbereitung auf eine mögliche Crawler-Unterstützung, ohne heute eine Investition zu erzwingen.
Entwickler-Signal. Die reine Existenz der Datei zeigt, dass die Marke sich aktiv mit KI-Sichtbarkeit beschäftigt und interne Standards pflegt.
Für klassische Corporate-Websites mit zwanzig bis fünfzig Seiten ist der Aufwand niedrig. Eine handgepflegte oder generierte llms.txt ist in wenigen Stunden erstellt. Die praktische Umsetzung inklusive Generator-Tools und Best Practices beschreiben wir in unserem llms.txt Implementierungs-Guide. Zur strategischen Einordnung im Kontext von LLMO gehört sie ins Bild, ist dort aber ein Baustein unter vielen.
FAQ: Häufig gestellte Fragen
Brauche ich llms.txt zwingend für SEO oder GEO?
Nein. Es ist weder ein Ranking-Faktor in klassischen Suchmaschinen noch eine Voraussetzung für Zitate in ChatGPT oder Perplexity. Die Datei ist eine freiwillige Ergänzung. Wichtiger sind crawlbare HTML-Inhalte, klare Strukturen und starke On-Page-Signale.
Wie unterscheidet sich llms.txt von der LLM Robots-Datei?
Der Begriff "LLM Robots-Datei" wird manchmal synonym verwendet, ist aber missverständlich. robots.txt kann LLM-Bots ausschließen oder zulassen. llms.txt dagegen regelt keine Zugriffe, sondern bietet eine Inhalts-Kuratierung. Beide Dateien liegen im Root, erfüllen aber verschiedene Aufgaben.
Welche AI-Crawler lesen llms.txt heute tatsächlich?
Keiner der großen Crawler bestätigt eine automatische Nutzung. Weder GPTBot, ClaudeBot, PerplexityBot, OAI-SearchBot noch Google-Extended haben eine offizielle Unterstützung angekündigt. Einige Entwickler-Tools wie Cursor oder kleinere Agents lesen llms-full.txt aktiv ein, sofern man sie darauf verweist.
Was gehört in eine llms.txt, was nicht?
Hinein gehören die wichtigsten Produkt-, Dokumentations- und Unternehmensseiten als Markdown-Links mit kurzen Beschreibungen. Nicht hinein gehören Tracking-Links, Duplikate, interne Testseiten oder sensible Inhalte. Die Datei ist öffentlich, vergleichbar mit sitemap.xml.
Wie oft muss llms.txt aktualisiert werden?
Immer dann, wenn zentrale Seiten hinzukommen, umbenannt werden oder wegfallen. Bei aktiven Content-Teams empfiehlt sich eine automatische Generierung aus dem CMS, damit die Datei nicht veraltet. Händisch gepflegte Versionen brauchen einen festen Review-Rhythmus.
---
Die Frage was ist llms.txt lässt sich heute klar beantworten, die Frage nach ihrer Wirkung nicht. Es bleibt ein junger Vorschlag mit klarer Definition und unklarer Zukunft. Für Unternehmen, die strukturell auf KI-Sichtbarkeit vorbereitet sein wollen, ist die Datei ein günstiger Baustein. Entscheidend bleiben aber crawlbare Inhalte, Entity-Aufbau und eine saubere Content-Strategie. Wenn Sie wissen wollen, wo Ihre Seite im Zusammenspiel aus robots.txt, llms.txt und generativer Suche steht, starten Sie mit unserem GEO-Content-Leitfaden. rankprompt.de unterstützt Sie dabei, die richtigen Hebel zu setzen, ohne auf noch unbestätigte Standards zu wetten.
