Test prístupu AI botov
Robots.txt hovorí, čo je povolené — ale firewall, CDN (Cloudflare, Imperva) či bezpečnostný plugin často AI botov zablokujú aj tak. Nástroj načíta stránku 13-krát ako Chrome a ako Googlebot, Bingbot, OAI-SearchBot, ChatGPT-User, GPTBot, Claude, Perplexity, Applebot a CCBot a ukáže, komu server stránku naozaj vráti.
- 30 sekúnd
- 13 botov vs. Chrome
- HTTP, veľkosť, challenge, robots
Čo vám to prinesie
- Odhalí tiché blokovanie — Web môže vyzerať v poriadku, no OAI-SearchBot či PerplexityBot dostávajú chybu 403 alebo CAPTCHA.
- Vyhľadávanie vs. trénovanie — OpenAI rozlišuje OAI-SearchBot (vyhľadávanie) od GPTBot (trénovanie) — môžete povoliť jedno a blokovať druhé.
- Porovnanie s človekom — Rozdiel oproti Chrome jasne ukáže pravidlo podľa User-Agenta.
Zadajte URL
Dostanú sa AI boti naozaj na váš web?
Stránku načítame 13-krát — ako Chrome a ako Googlebot, Bingbot, OAI-SearchBot, ChatGPT-User, GPTBot, Claude, Perplexity, Applebot a CCBot — a porovnáme, čo server každému vráti.
Čo nástroj zlepší
Kategórie GEO auditu, na ktoré má vplyv
Ako to funguje
- 1Zadajte URL
- 2Porovnajte odpovede servera pre každého bota
- 3Povoľte vyhľadávacích botov vo firewalle/CDN
FAQ
Časté otázky
Prečo môže byť Googlebot „blokovaný", hoci na Google som?
Niektoré CDN overujú aj IP adresu bota. Náš test posiela správny User-Agent z našej IP, preto ho CDN môže zablokovať ako podvrh, kým skutočný Googlebot prejde. Pri AI botoch je však blokácia podľa User-Agenta najčastejšia príčina.
Ako AI botov povoliť v Cloudflare?
V Security → Bots skontrolujte „Block AI bots" a v AI Crawl Control povoľte vyhľadávacích botov (OAI-SearchBot, PerplexityBot, Claude-SearchBot).