Nástroj · AI crawlery a agenti
Generátor robots.txt
Vytvorí robots.txt s pravidlami pre AI botov podľa toho, čo chcete: byť citovaný v ChatGPT, Perplexity a Claude, a zároveň rozhodnúť, či smie váš obsah slúžiť na trénovanie modelov.
- 1 minúta
- Hotový robots.txt
- Vyhľadávanie vs. trénovanie
Čo vám to prinesie
- Viditeľnosť v AI vyhľadávaní — Povolí vyhľadávacích botov (OAI-SearchBot, PerplexityBot, Claude-SearchBot), bez ktorých vás AI necituje.
- Kontrola nad trénovaním — GPTBot, ClaudeBot, Google-Extended či CCBot môžete zablokovať bez vplyvu na citácie.
- Bez chýb v syntaxi — Pravidlá podľa RFC 9309 vrátane odkazu na sitemapu.
Generátor robots.txt
Generátor robots.txt pre AI botov
Čo nástroj zlepší
Kategórie GEO auditu, na ktoré má vplyv
Ako to funguje
- 1Zvoľte, ktorých botov povoliť
- 2Doplňte adresu sitemapy
- 3Skopírujte súbor do koreňa webu a overte ho scannerom
FAQ
Časté otázky
Zmizne web z Googlu, ak zablokujem GPTBot?
Nie. GPTBot slúži iba OpenAI na trénovanie. Googlebot, Bingbot aj vyhľadávací bot ChatGPT (OAI-SearchBot) sa riadia vlastnými pravidlami.
Kam súbor nahrám?
Do koreňa domény: https://vasadomena.sk/robots.txt. Na inej adrese ho boti nehľadajú.