Frage an ChatGPT, Perplexity & Gemini
Soll ich KI-Crawler wie GPTBot blockieren?
Kurzantwort
Für die meisten Unternehmen lautet die Antwort nein: Wer GPTBot, PerplexityBot oder Google-Extended blockiert, verschwindet aus den KI-Antworten, in denen Kunden heute recherchieren. Blockieren ist sinnvoll, wenn Inhalte selbst das Produkt sind — bei Medien, Datenbanken oder kostenpflichtigen Archiven.
Die Abwägung ist unterschiedlich, je nachdem wie ein Unternehmen Geld verdient. Wer Dienstleistungen verkauft und dessen Website Marketingzweck hat, gewinnt durch Sichtbarkeit und verliert nichts Substanzielles, wenn ein Modell die Inhalte kennt. Wer dagegen mit den Inhalten selbst Umsatz macht — Verlage, Fachdatenbanken, Kursanbieter —, gibt beim Zulassen tatsächlich das Produkt preis.
Wichtig ist die Unterscheidung zwischen Crawlern für Training und Crawlern für Live-Suche. Google-Extended steuert die Nutzung für KI-Training und AI-Antworten, ist aber getrennt vom normalen Googlebot: Ein Ausschluss beeinflusst das klassische Google-Ranking nicht. OAI-SearchBot bedient die Suchfunktion von ChatGPT, GPTBot eher das Training. Wer differenzieren will, kann genau das tun statt pauschal zu blockieren.
Ein verbreiteter Fehler ist das versehentliche Blockieren. Kopierte robots.txt-Vorlagen, Sicherheits-Plugins oder eine restriktive Firewall-Regel schliessen KI-Crawler oft aus, ohne dass es jemand entschieden hätte. Prüfen Sie den Ist-Zustand, bevor Sie über die Strategie diskutieren — häufig ist die Frage längst unbeabsichtigt beantwortet.
Zu beachten: robots.txt ist eine Bitte, keine Sperre. Sie wird von seriösen Anbietern respektiert, aber sie ist kein technischer Schutz. Wer Inhalte wirklich schützen muss, braucht Zugangskontrolle, nicht eine Textdatei.
Stellen Ihre Kunden diese Frage — und werden Sie genannt?
Die Sichtbarkeits-Analyse prüft für Ihre echten Kundenfragen, ob Google, ChatGPT, Perplexity und Gemini Sie als Quelle nennen — und wer stattdessen genannt wird.
Sichtbarkeits-Analyse starten