Für KI unsichtbar: Warum ChatGPT und Perplexity Ihre Website nicht lesen

Ihre Website öffnet sich im Browser sauber, die Texte stehen da, die Seite lädt zügig — und in den Antworten von ChatGPT oder Perplexity taucht Ihr Betrieb trotzdem nicht auf. Das ist selten Zufall. KI-Antwortmaschinen lesen Websites anders als ein Mensch. Wer versteht, an welchen zwei Stellen sie hängen bleiben, kann die häufigsten Blockaden gezielt beheben.

Auge und Maschine sehen nicht dasselbe

Wenn Sie eine Seite aufrufen, erledigt Ihr Browser viel Arbeit: Er lädt den Grundtext, führt Programmcode aus, holt Schriften und Bilder nach und setzt daraus die fertige Ansicht zusammen. Ein KI-Crawler ist ein deutlich einfacheres Programm. Er fordert die Seite an, bekommt eine Antwort zurück und liest, was in dieser Antwort steht. Ob Ihre Inhalte bei ihm ankommen, hängt an zwei Bedingungen: Darf das Programm überhaupt herein? Und stehen die wichtigen Informationen bereits im ausgelieferten Text — oder entstehen sie erst später im Browser?

Erste Hürde: Wird der KI-Crawler hereingelassen?

Jeder seriöse Crawler meldet sich mit einem Namen an, dem sogenannten User Agent. In einer kleinen Textdatei namens robots.txt, die im Stammverzeichnis Ihrer Domain liegt und unter ihredomain.de/robots.txt erreichbar ist, lässt sich festlegen, welcher dieser Namen auf welche Bereiche zugreifen darf. Für die KI-Sichtbarkeit sind vor allem diese Kennungen wichtig:

• GPTBot (OpenAI): Sammelt Inhalte, die in das Training der KI-Modelle einfließen können. Wird GPTBot gesperrt, sollen die Inhalte nicht fürs Training genutzt werden.
• OAI-SearchBot (OpenAI): Bringt Websites in die Such-Funktion von ChatGPT. Wer diese Kennung aussperrt, erscheint in den Suchergebnissen innerhalb von ChatGPT nicht mehr.
• PerplexityBot (Perplexity): Baut den Suchindex von Perplexity auf. Laut Anbieter dient er der Suche und trainiert keine Foundation-Modelle.
• Google-Extended (Google): Steuert allein, ob Inhalte für Googles KI-Systeme Gemini und Vertex AI verwendet werden. Diese Kennung ruft selbst keine Seiten ab und wirkt sich ausdrücklich nicht auf die normale Google-Suche aus.

Ein häufiges Missverständnis: Manche Betriebe sperren GPTBot in dem Glauben, sich damit vor der ChatGPT-Suche zu verbergen. Für die Sichtbarkeit in der ChatGPT-Suche ist jedoch OAI-SearchBot zuständig. Einige Website-Baukästen, Sicherheitsdienste und Server-Voreinstellungen sperren KI-Crawler zudem von sich aus. Ein Blick in die eigene robots.txt lohnt sich deshalb. Zu beachten ist außerdem: Anfragen, die ein Nutzer selbst auslöst — etwa über ChatGPT-User oder Perplexity-User —, folgen den robots.txt-Regeln unter Umständen nicht, weil sie als direkte Nutzeraktion gelten. Änderungen an der robots.txt brauchen bei OpenAI und Perplexity nach deren Angaben rund 24 Stunden, bis sie greifen.

Zweite Hürde: Was steht wirklich im Quelltext?

Viele moderne Websites werden mit JavaScript-Bausteinen wie React, Vue oder Angular gebaut. Der eigentliche Inhalt — Leistungen, Preise, Öffnungszeiten, Antworten auf häufige Fragen — entsteht dabei oft erst, nachdem der Browser den Programmcode ausgeführt hat. Genau hier liegt das Problem: Ein KI-Crawler erhält den rohen Text, bevor dieser Code läuft.

Nach einer Auswertung des Infrastruktur-Anbieters Vercel führen die großen KI-Crawler mit Stand 2026 kein JavaScript aus — darunter GPTBot, OAI-SearchBot und PerplexityBot. Vercel untersuchte dafür über 500 Millionen Zugriffe von GPTBot und fand keinen Hinweis auf ausgeführtes JavaScript; GPTBot lädt solche Dateien zwar in rund 11,5 Prozent der Fälle herunter, startet sie aber nicht. Die Folge: Alles, was erst durch JavaScript im Browser erscheint, bleibt für diese Systeme unsichtbar. Eine Seite kann in der klassischen Google-Suche gut platziert sein — weil Googlebot den Code ausführt — und für ChatGPT oder Perplexity zugleich weitgehend leer wirken. Eine Ausnahme bildet Googles Gemini, das auf die Rendering-Technik von Googlebot zurückgreift.

Lesbarkeit ist die Vorbedingung, keine Garantie

Eine wichtige Einordnung: Dass ein KI-System Ihre Seite technisch lesen kann, ist die Grundlage dafür, überhaupt als Quelle in Frage zu kommen. Es ist keine Zusage, danach auch empfohlen zu werden. Ob ein Betrieb in einer Antwort auftaucht, hängt von weiteren Signalen ab — etwa davon, wie klar und vollständig die Inhalte sind, wie einheitlich Name, Adresse und Telefonnummer über verschiedene Verzeichnisse hinweg auftreten und wie ein Ort im Netz insgesamt beschrieben wird. Die technische Lesbarkeit steht am Anfang dieser Kette. Fehlt sie, greifen alle weiteren Bemühungen ins Leere, weil die Maschine schlicht keinen Text vorfindet, mit dem sie arbeiten könnte. Der Reihenfolge nach lohnt es sich deshalb, zuerst den Zugang und die Auslieferung des Rohtextes zu klären und erst danach an Inhalt und Auffindbarkeit zu feilen.

So prüfen Sie Ihre Seite in wenigen Minuten

Sie brauchen dafür kein Fachwissen, nur einen Browser:

• Quelltext ansehen: Öffnen Sie Ihre Seite, klicken Sie mit der rechten Maustaste und wählen Sie „Seitenquelltext anzeigen“ (oder Strg+U). Suchen Sie mit Strg+F nach einer wichtigen Aussage, etwa Ihren Öffnungszeiten. Taucht sie im Quelltext nicht auf, entsteht sie vermutlich erst durch JavaScript.
• robots.txt lesen: Rufen Sie ihredomain.de/robots.txt auf und achten Sie auf „Disallow“-Zeilen bei GPTBot, OAI-SearchBot, PerplexityBot oder Google-Extended.
• JavaScript testweise abschalten: Deaktivieren Sie JavaScript in den Browser-Einstellungen und laden Sie die Seite neu. Was dann noch sichtbar ist, sieht ein KI-Crawler ungefähr genauso.

Als allgemeine Orientierung gilt: Die wichtigsten Fakten — wer Sie sind, was Sie anbieten, wo Sie sitzen — sollten als echter Text bereits in der ausgelieferten Seite stehen, statt allein in Skripten oder Bildern zu stecken. Technisch erreicht man das über serverseitiges Rendern oder das Vorab-Erzeugen der Seiten. Welche dieser Punkte bei Ihrem Betrieb tatsächlich greifen, macht eine strukturierte Bestandsaufnahme wie die KI-Sichtbarkeits-Dokumentation nachvollziehbar.

Wo Ihr Betrieb heute steht

Ob ChatGPT, Gemini und andere KI-Systeme Ihren Betrieb heute schon empfehlen, lässt sich messen. Der kostenlose KI-Sichtbarkeits-Check von mehr gefunden zeigt Ihnen den Stand; wer es genauer wissen möchte, findet in der KI-Sichtbarkeits-Dokumentation jeden Befund mit Beleg und einen umsetzbaren Handlungsplan. Beides unverbindlich und ohne Vorbereitung.

Quellen

• OpenAI — Overview of OpenAI Crawlers (GPTBot, OAI-SearchBot, ChatGPT-User)
• Perplexity — Perplexity Crawlers
• Google Search Central — Google-Extended / Common Crawlers
• Vercel — The rise of the AI crawler