Blockiert Ihre Website ChatGPT?
Ob Ihr Server die Bots der KI-Assistenten hereinlässt. robots.txt ist nur eine Bitte — Bot-Schutz blockiert still, und im Browser sieht die Website normal aus.
Wir rufen Ihre Startseite als Browser und als jeder KI-Bot ab und lesen die robots.txt.
Reicht robots.txt nicht?
Nein. robots.txt ist eine Bitte. Eine Firewall oder die CDN-Regel „KI-Bots blockieren“ antwortet Bots mit einem Fehler, während die Website im Browser normal aussieht — deshalb fragen wir den Server als jeder Bot und vergleichen mit einem Browser.
Warum kann „nicht prüfbar“ herauskommen?
Wenn der Server auch einen normalen Browser abweist, sagt eine Abweisung des Bots nichts über Bots aus. Das sagen wir so, statt zu raten.
Soll ich GPTBot blockieren?
Das entscheiden Sie. Laut OpenAI sammelt GPTBot Inhalte, die zum Training der Modelle genutzt werden können; die ChatGPT-Suche nutzt OAI-SearchBot, und eine Sperre von GPTBot entfernt Sie nicht aus der ChatGPT-Suche.