Grok Bot und GrokBot: Agent ja, Crawler nein

Titelbild: KI-generiert

In einer Bot-Liste taucht „GrokBot“ auf, in einem Forum steht, man solle ihn freigeben, damit Grok die eigene Website zitiert. Wer dann in der Dokumentation von xAI nachsieht, findet keinen solchen Crawler. Dafür gibt es seit August 2026 ein Produkt namens Grok Bot, mit Leerzeichen. Die beiden Namen klingen gleich, meinen aber verschiedene Dinge, und das hat Folgen für Ihre robots.txt und Ihren Bot-Schutz.

Wir trennen beide Begriffe, zeigen, was xAI dokumentiert und was nicht, wie Grok Bot Websites besucht und was eine Regel für GrokBot tatsächlich bewirkt. xAI gehört inzwischen zu SpaceX, die Produkte heißen weiter Grok. Stand: 1. November 2026.

Gibt es einen Crawler namens GrokBot?

Nicht als dokumentierten Crawler. Wir haben am 1. November 2026 den vollständigen Doku-Index von docs.x.ai und alle 30 Seiten zu Grok Bot durchsucht. Keine Seite nennt einen Crawler-Namen, einen User-Agent oder eine Anleitung zur robots.txt (Quelle: xAI-Doku, 2026). Das ist ein Negativbefund: Eine Seite außerhalb dieser Doku ist nicht ausgeschlossen, weil x.ai automatische Abrufe teilweise blockt.

Woher kommt der Name dann? Aus Bot-Verzeichnissen und den robots.txt-Dateien großer Websites. Amazon sperrt auf amazon.com und amazon.de die Namen „GrokBot“, „Grok-DeepSearch“ und „xAI-Grok“ (Quelle: amazon.de robots.txt, 2026). Dass Amazon einen Namen sperrt, belegt allerdings nicht, dass ein Bot mit diesem Namen existiert. Amazon sperrt dort auch Namen wie „GoogleAgent-Mariner“, die in Googles Doku ebenfalls nicht vorkommen.

Eine gegenteilige Behauptung ist nicht belegt. Das Analyseportal StackFox schreibt, xAI habe drei Crawler-Namen dokumentiert (Quelle: StackFox, 2026). In der Doku von xAI fanden wir sie nicht. Bis zu einem Beleg behandeln wir diese Aussage als nicht zutreffend.

Ein Detail am Rande: grok.com sperrt in der eigenen robots.txt fremde KI-Bots wie GPTBot, ClaudeBot und PerplexityBot für fast alle Bereiche außer Startseite, Preisseiten und Imagine (Quelle: grok.com robots.txt, 2026). Wie Grok selbst crawlt, verrät das nicht.

Was ist Grok Bot?

Ein persönlicher KI-Agent von xAI mit eigenem Computer in der Cloud. xAI beschreibt Grok Bot als „AI teammates“: Jeder Bot arbeitet auf einem dauerhaften Cloud-Computer mit Browser, Dateisystem und Terminal, erledigt mehrstufige Aufgaben über Apps und Websites hinweg und bittet bei Bedarf um Freigabe (Quelle: xAI-Doku, 2026).

• Grok Bot läuft auf macOS, Windows, Linux, iOS und Android.

• Er ist in „The X Subscription“ in den Stufen Premium, Super und Ultra enthalten, nicht in Plus (Quelle: xAI-Doku, 2026).

• Laut Release Notes startete er im August 2026, die App steht seit dem 11. August 2026 im App Store.

• Seit Ende Oktober 2026 kann Grok Bot auch einkaufen, jeder Kauf braucht laut Changelog eine Freigabe (Quelle: xAI Changelog, 2026).

Auch in Deutschland ist die App erhältlich. Die Apps „Grok“ und „Grok Bot“ stehen im deutschen App Store, Anbieter ist laut App Store die Twitter International Unlimited Company in Irland. Eine Funktion fehlt für Europa: Grok Bot per @bot auf X eine Aufgabe zu geben, geht laut xAI nicht für Konten aus der EU, Island, Liechtenstein, Norwegen, Großbritannien und Australien. Maßgeblich ist das bei X hinterlegte Land, ein VPN hilft nicht (Quelle: xAI-Doku, 2026).

Das Bot-Verzeichnis Known Agents, früher Dark Visitors, führt Grok Bot als Agenten und nicht als Crawler, mit dem Vermerk, dass er robots.txt voraussichtlich nicht folgt. Laut Verzeichnis haben 7 % der beobachteten Top-Websites eine robots.txt-Regel für Grok Bot (Quelle: Known Agents, Oktober 2026). Das ist eine Einschätzung eines Drittanbieters, keine Angabe von xAI.

Wie besucht Grok Bot Websites?

Mit einem Browser auf dem Cloud-Computer, über geteilte IP-Adressen und ohne eigenen User-Agent in der Doku. Laut xAI gehen die gehosteten Computer standardmäßig über geteilte statische IP-Adressen ins Netz, die sich alle Grok-Bot-Kunden teilen. Die aktuellen Bereiche gibt es nur über das Account-Team, nicht öffentlich (Quelle: xAI-Doku, 2026).

Seit dem 11. September 2026 können Nutzer den Verkehr zudem über den eigenen Rechner leiten. Dann sieht die Website das Netz und die IP-Adresse des Nutzers (Quelle: xAI-Doku, 2026; xAI Changelog, 2026). Ein Besuch von Grok Bot ist in diesem Fall von einem normalen Besuch kaum zu unterscheiden.

Praxistests deuten in dieselbe Richtung, betreffen aber Grok allgemein. Ein Nutzer auf Reddit verfolgte geheime Adressen und berichtet, Grok sei pro Abruf von mehreren IP-Adressen gekommen, insgesamt 59 bei sechs Abrufen, immer als Chrome oder Safari (Quelle: Reddit r/SEO, 2026). StackFox berichtet von Abrufen mit generischen Kennungen wie „Go-http-client“, veraltetem Chrome oder iPhone-Safari, nie mit „Grok“ oder „xAI“ im User-Agent (Quelle: StackFox, 2026). Das sind Einzeltests, keine Messung.

Quellen: xAI-Doku, 2026, amazon.de robots.txt, 2026, Known Agents, 2026.

Bringt eine robots.txt-Regel für GrokBot etwas?

Belegt ist das nicht. Weder sagt xAI, dass Grok die robots.txt beachtet, noch, dass Grok sie ignoriert. Es gibt dazu auch keine unabhängige Messung, nur Einzeltests. Eine Regel für einen Namen, den kein Bot sendet, bewirkt aus unserer Sicht vermutlich nichts.

Ein Praktiker auf Reddit empfahl im September 2026, „GrokBot, xAI-Grok, Grok-DeepSearch“ in Cloudflare freizugeben, damit die eigene Website in Grok sichtbar bleibt (Quelle: Reddit r/TechSEO, 2026). Wenn Grok-Abrufe aber als gewöhnlicher Browser ankommen, greift eine Freigabe nach Namen ins Leere. Schaden richtet sie nicht an, sie gibt nur falsche Sicherheit.

Wichtiger als die robots.txt ist der Bot-Schutz. Agenten, die als gewöhnlicher Browser auftreten, bremst eher ein Captcha, eine Sperrliste oder eine Regel im CDN als eine robots.txt-Zeile. Wer pauschal sperrt, sperrt womöglich auch Menschen, die einen Agenten beauftragt haben. Was die robots.txt für KI-Crawler leisten kann, erklären wir unter robots.txt für KI.

Woher holt Grok seine Antworten?

Aus einer Websuche und einer eigenen Suche in X. In der Doku für Entwickler beschreibt xAI zwei Werkzeuge: „Web Search“ für die Echtzeitsuche und den Abruf von Seiten, „X Search“ für Stichwort-, Themen- und Nutzersuche auf X (Quelle: xAI-Doku, 2026; xAI-Doku, 2026). Welchen Suchindex Grok im Hintergrund nutzt, nennt xAI nicht. Diese Angaben gelten für die Schnittstelle, ob die App dieselben Werkzeuge nutzt, steht dort nicht ausdrücklich.

Für die Sichtbarkeit ist X dabei weniger wichtig, als man denkt. In einer Auswertung von Ahrefs für die USA (Juni 2026) entfielen von den Zitaten der 50 meistzitierten Websites 16,3 % auf reddit.com, 15,1 % auf youtube.com, 13,9 % auf facebook.com und nur 1,4 % auf x.com, das damit auf Platz 12 lag (Quelle: Ahrefs, 2026). Ahrefs verkauft das Werkzeug, mit dem gemessen wurde. In Deutschland nutzen laut Bitkom 6 % der KI-Nutzenden Grok (Quelle: Bitkom, 2026).

Für die meisten Unternehmen bleibt die Reihenfolge gleich. Wer bei Google gefunden wird und auf Drittseiten erwähnt ist, hat auch in KI-Antworten die besseren Chancen, und Grok ist eine von mehreren Quellen. Welche KI-Suchen es gibt und wo Firmen sichtbar sein sollten, steht unter KI-Suchmaschinen.

Wie der Assistent insgesamt arbeitet und wie verbreitet er ist, erklärt unser Beitrag zu Grok.

Was sollten Website-Betreiber jetzt prüfen?

Wie Ihr Bot-Schutz mit Agenten umgeht, und ob Ihre Zahlen Agenten überhaupt zeigen. Eine Umbauliste braucht es nicht, drei Fragen reichen für den Anfang:

• Sperrt Ihr CDN oder Ihre Firewall Besucher nach Listen mit Namen wie GrokBot, und glauben Sie, damit Grok zu steuern? Dann lohnt ein zweiter Blick auf die Regel.

• Würden Sie es merken, wenn Agenten an Captchas oder Formularen scheitern? Ein Nutzer testete 23 Agenten und berichtet, dass Grok drei Seiten las, ohne zu klicken oder zu scrollen (Quelle: Reddit r/TechSEO, 2026).

• Wissen Sie, dass Agenten in Analytics oft wie normale Besucher oder als direkter Zugriff erscheinen? Wie sich KI-Verweise messen lassen, zeigen wir unter KI-Traffic in GA4 und Direct Traffic und KI.

Welche Crawler sich offiziell ausweisen und welchen Zweck sie haben, finden Sie in unserer Übersicht der KI-Crawler. Wie Agenten insgesamt Anbieter finden und auswählen, beschreiben wir unter KI-Agenten.

Wenn Sie sicher sein wollen, dass Crawler, Agenten und Bot-Schutz zusammenpassen, prüfen wir das in einem technischen GEO-Audit. Als GEO-Agentur zeigen wir Ihnen außerdem, wie Ihre Marke in KI-Antworten erscheint, mit Festpreis vor Beauftragung.

FAQ: Grok Bot und GrokBot

Gibt es einen Crawler namens GrokBot? Nicht laut xAI. Die Doku von xAI nennt Stand 1. November 2026 keinen Crawler, keinen User-Agent und keine robots.txt-Regel. Der Name stammt aus Bot-Listen und aus Amazons robots.txt.

Was ist der Unterschied zwischen Grok Bot und GrokBot? Grok Bot mit Leerzeichen ist ein Agent von xAI, der seit August 2026 Aufgaben auf einem Cloud-Computer erledigt. GrokBot ohne Leerzeichen ist ein Name aus Bot-Listen, für den es keinen Beleg von xAI gibt.

Kann ich Grok Bot per robots.txt blockieren? Belegt ist das nicht. xAI nennt keinen User-Agent, und Grok Bot nutzt geteilte IP-Adressen ohne öffentliche Liste. Ob eine robots.txt-Regel wirkt, lässt sich deshalb nicht sagen.

Ist Grok Bot in Deutschland verfügbar? Die App Grok Bot steht seit dem 11. August 2026 im deutschen App Store. Das Antaggen von @bot auf X funktioniert für Konten aus der EU laut xAI dagegen nicht.

Warum sperrt Amazon GrokBot? Amazon sperrt in seiner robots.txt die Namen GrokBot, Grok-DeepSearch und xAI-Grok. Warum, sagt Amazon nicht. Dass ein Name gesperrt ist, belegt nicht, dass es einen Bot mit diesem Namen gibt.

Wie erkenne ich Besuche von Grok in meinen Logs? Nicht sicher. Laut xAI kommt Grok Bot über geteilte IP-Adressen oder über die des Nutzers, und Praxistests berichten von gewöhnlichen Browser-Kennungen ohne „Grok“ oder „xAI“.

Für Ihre Website gilt: Grok Bot ist ein Agent mit eigenem Browser, GrokBot ein Name ohne Beleg. Steuern lässt sich das eher über einen bewussten Bot-Schutz als über die robots.txt. Wenn Sie wissen möchten, wie Ihre Website für KI-Systeme dasteht, sprechen Sie mit uns.