Blokkeert je site ChatGPT?
Of je server de bots van AI-assistenten binnenlaat. robots.txt is alleen een verzoek — botbescherming blokkeert stil, en in een browser ziet de site er normaal uit.
We vragen je homepage op als browser en als elke AI-bot, en lezen robots.txt.
Is robots.txt niet genoeg?
Nee. robots.txt is een verzoek. Een firewall of de CDN-regel „AI-bots blokkeren” antwoordt bots met een fout terwijl de site er in de browser normaal uitziet — daarom vragen we de server als elke bot en vergelijken we met een browser.
Waarom kan er „kon niet controleren” staan?
Als de server ook een gewone browser weigert, zegt een weigering aan een bot niets over bots. Dat zeggen we liever dan te gokken.
Moet ik GPTBot blokkeren?
Dat is jouw keuze. Volgens OpenAI verzamelt GPTBot content die gebruikt kan worden om modellen te trainen; ChatGPT-zoeken gebruikt OAI-SearchBot, en GPTBot blokkeren haalt je niet uit ChatGPT-zoeken.