Die meisten WordPress-Websites blockieren KI-Crawler, ohne dass jemand das bewusst entschieden hätte. Eine aggressive Standard-Bot-Blockade eines Caching-Plugins, eine „schlechte Bots blockieren"-Liste eines Sicherheits-Plugins, die nicht aktualisiert wurde, um GPTBot von einem Scraper zu unterscheiden, oder eine plattformweite robots.txt eines Hosting-Anbieters — jedes davon kann eine Website für ChatGPT, Claude und Perplexity unsichtbar machen, oft ohne jede Fehlermeldung, die darauf hinweist.
Dies ist eine Schritt-für-Schritt-Anleitung zur Prüfung, Korrektur und Verifizierung von KI-Crawler-Zugriff und Inhaltslesbarkeit auf einer WordPress-Website.
Warum Ihre WordPress-Website für KI unsichtbar sein könnte (ohne dass Sie es wissen)
Drei Ursachen erklären das meiste davon:
- JavaScript-abhängige Themes und Page-Builder. Manche KI-Crawler führen kein clientseitiges JavaScript aus. Wenn ein Theme oder Builder Kerninhalte erst nach JS-Ausführung rendert, sieht ein Crawler, der das nicht ausführt, eine leere oder nahezu leere Seite — derselbe Fehlerfall, den Googlebot vor Jahren durch Rendering gelöst hat, den manche KI-Crawler noch nicht nachvollzogen haben.
- Sicherheits- und Firewall-Plugins mit veralteten Bot-Listen. Eine „bekannte schlechte Bots blockieren"-Funktion ist nur so gut wie ihre Liste. Plugins, die nicht kürzlich aktualisiert wurden, unterscheiden GPTBot (OpenAIs Crawler) möglicherweise nicht von einem böswilligen Scraper und blockieren beide unter einer Regel.
- Überhaupt keine strukturierten Daten. Selbst eine vollständig crawlbare Seite gibt einem KI-System wenig an die Hand, wenn es in maschinenlesbarer Form nicht erkennen kann, ob eine Seite ein Blogbeitrag, ein Produkt oder die Kontaktseite eines Unternehmens ist. Dafür ist JSON-LD da — mehr dazu unten.
Schritt 1 — Prüfen, ob KI-Crawler tatsächlich auf Ihre Website zugreifen können
Zwei Prüfmöglichkeiten, nach Aufwand geordnet:
Der schnelle Weg: einen kostenlosen Scan der URL Ihrer Website durchführen. Er prüft robots.txt-Regeln pro KI-Crawler, ob die Seite einem Bot denselben Inhalt liefert wie einem Browser, und meldet das Ergebnis in klarer Sprache — ohne Anmeldung.
Der manuelle Weg: Rufen Sie Ihre eigene Website mit dem User-Agent-String eines KI-Crawlers ab und lesen Sie, was tatsächlich zurückkommt:
curl -A "Mozilla/5.0 (compatible; GPTBot/1.4; +https://openai.com/gptbot)" https://ihreseite.de/
Wenn die Antwort ein 403, eine Weiterleitung auf eine Fehlerseite oder HTML ohne Ihre tatsächlichen Inhalte ist, blockiert oder unterbricht etwas die Anfrage, bevor Ihre Inhalte je gerendert werden.
Schritt 2 — robots.txt für KI-Crawler korrigieren
WordPress generiert standardmäßig eine virtuelle robots.txt, wenn keine physische robots.txt-Datei im Website-Root existiert, und die meisten SEO-Plugins (Yoast, Rank Math) lassen Sie deren Inhalt über die Plugin-Einstellungen bearbeiten. Worauf zu prüfen ist:
- Keine pauschale
Disallow: /-Regel, die aus der Zeit vor KI-Crawlern stammt und nie überarbeitet wurde. - Explizites
Allow(oder das Fehlen einesDisallow) fürGPTBot,ClaudeBot,PerplexityBotundGoogle-Extendedspeziell, da manche Standard-robots.txt-Dateien von Hosting-Anbietern als Sicherheitsmaßnahme „alle Bots außer bekannten Suchmaschinen" blockieren — was stillschweigend jeden KI-Crawler einschließt. Siehe KI-Crawler erklärt für das vollständige aktuelle Register der Crawler-Namen und was jeder tatsächlich tut. - Wenn Sie bewusst entscheiden, welche Crawler Sie erlauben statt blockieren möchten (nicht aus Versehen), siehe den Abschnitt zum tatsächlichen Abwägen im selben Beitrag — Erlauben versus Blockieren ist nicht für jeden Crawler eine einzige offensichtlich richtige Antwort.
Bereit für KI-Optimierung?
Installieren Sie das kostenlose CrawlPod-Plugin und sehen Sie den KI-Sichtbarkeits-Score Ihrer WordPress-Website in wenigen Minuten.
Schritt 3 — llms.txt zu Ihrer WordPress-Website hinzufügen
llms.txt ist eine Klartextdatei unter /llms.txt, die einem KI-Modell einen kurzen, strukturierten Index einer Website gibt — siehe die vollständige Erklärung dafür, was sie ist, was nicht, und warum sie eine kostengünstige Ergänzung ist, keine Garantie für irgendetwas.
Zwei Wege, sie heute auf WordPress hinzuzufügen:
- Manuell: eine Klartextdatei namens
llms.txterstellen, über den Dateimanager Ihres Hosts oder per SFTP ins Dokument-Root der Website hochladen, nach dem Format# Site-Name, eine Beschreibungszeile und eine Liste der Schlüsselseiten. - Plugin-Methode: eine kleine, aber wachsende Zahl von WordPress-SEO-Plugins hat begonnen, llms.txt-Generierung hinzuzufügen. Prüfen Sie, ob Ihr bestehendes SEO-Plugin dies bereits bietet, bevor Sie ein zweites, nur für diese Datei gedachtes Plugin installieren.
Schritt 4 — JSON-LD-Schema-Markup hinzufügen
Strukturierte Daten sind eine der sieben gewichteten Dimensionen im KI-Sichtbarkeits-Scoring und eines der direkteren Signale, die eine Seite bieten kann — sie sagt, was eine Seite ist, statt ein KI-System das aus Fließtext ableiten zu lassen. Auf WordPress die häufigsten Lücken:
- Article-Schema für Blogbeiträge — Überschrift, Autor, Veröffentlichungs-/Änderungsdatum. Die meisten SEO-Plugins fügen das standardmäßig hinzu; bestätigen Sie mit einem Schema-Validator oder dem kostenlosen Scanner, dass es tatsächlich vorhanden ist, nehmen Sie es nicht einfach an.
- FAQPage-Schema für Frage-Antwort-Inhalte — passt gut zu einem echten FAQ-Block, falls Ihr Theme oder Page-Builder einen unterstützt.
- Product-Schema für WooCommerce — Name, Preis, Verfügbarkeit, in einem Format, das ein KI-Shopping-Assistent zuverlässig parsen kann, nicht nur eine für Menschen lesbare Preiszeichenkette.
Schritt 5 — Inhalte für KI strukturieren, nicht nur zum Überfliegen für Menschen
Drei Gewohnheiten sind wichtiger als die meisten WordPress-spezifischen Einstellungen:
- Antwort-zuerst-Schreiben. Formulieren Sie die direkte Antwort auf die Kernfrage einer Seite in den ersten ein bis zwei Sätzen, vor Hintergrund und Kontext. Das ist die am stärksten gewichtete Dimension im KI-Sichtbarkeits-Scoring aus gutem Grund — siehe den GEO-Leitfaden für die vollständige Aufschlüsselung aller sieben Dimensionen.
- Saubere Überschriftenhierarchie. Ein H1, dann H2s und H3s der Reihe nach, keine übersprungenen Ebenen. Das erlaubt einem Crawler, eine lange Seite in einzeln zitierbare Abschnitte zu unterteilen, statt sie als einen undifferenzierten Block zu behandeln.
- Kurze, in sich geschlossene Absätze. Ein Absatz, der nur mit den drei vorangehenden Absätzen Sinn ergibt, ist für ein KI-System schwer isoliert zu zitieren — jeder Abschnitt sollte für sich stehen.
Schritt 6 — Oder CrawlPod für WordPress die Arbeit machen lassen
Alles oben Genannte lässt sich manuell erledigen, in jedem Theme, mit jedem Hosting. CrawlPod für WordPress ist ein kostenloses Plugin, live auf WordPress.org, das die oben beschriebene Prüfung und Korrektur direkt aus dem WordPress-Admin-Dashboard erledigt, ohne Theme-Code zu bearbeiten: Crawler-Zugriffskontrolle, llms.txt-Generierung, strukturierte Daten für Beiträge und WooCommerce-Produkte, und ein Sichtbarkeits-Score. Kostenlos installieren oder weiter die manuellen Schritte oben nutzen — beides funktioniert heute auf jeder WordPress-Installation.
Was zu erwarten ist
Nichts davon garantiert eine Zitierung — kein Tool kann das, da KI-Systeme anhand von Faktoren außerhalb der Kontrolle jeder einzelnen Website entscheiden, was sie zitieren. Was es tut, ist die zufälligen Blockaden zu entfernen: ein Crawler, der die Website vorher nicht erreichen konnte, kann es jetzt, und Inhalte, die einem KI-System vorher nichts zum Parsen gaben, stellen jetzt ihre eigene Struktur explizit dar. Verfolgen Sie, ob es funktioniert, genauso wie Sie jeden anderen Empfehlungskanal verfolgen würden — KI-getriebener Traffic erscheint in GA4 als Referral-Traffic von chat.openai.com, perplexity.ai und ähnlichen Domains, getrennt von der organischen Suche.
FAQ
Häufige Fragen zur KI-Sichtbarkeit von WordPress werden unten beantwortet.
Sehen Sie genau, wo Ihre WordPress-Website heute steht: führen Sie einen kostenlosen KI-Sichtbarkeits-Scan durch — ohne Anmeldung, echte Prüfungen gegen Ihre Live-URL.