Nástroj · AI crawlery a agenti
Generátor robots.txt
Vytvoří robots.txt s pravidly pro AI boty podle toho, co chcete: být citován v ChatGPT, Perplexity a Claude, a zároveň rozhodnout, zda smí váš obsah sloužit k trénování modelů.
- 1 minuta
- Hotový robots.txt
- Vyhledávání vs. trénování
Co vám to přinese
- Viditelnost v AI vyhledávání — Povolí vyhledávací boty (OAI-SearchBot, PerplexityBot, Claude-SearchBot), bez kterých vás AI necituje.
- Kontrola nad trénováním — GPTBot, ClaudeBot, Google-Extended či CCBot můžete zablokovat bez vlivu na citace.
- Bez chyb v syntaxi — Pravidla podle RFC 9309 včetně odkazu na sitemapu.
Generátor robots.txt
Generátor robots.txt pro AI boty
Co nástroj zlepší
Kategorie GEO auditu, na které má vliv
Jak to funguje
- 1Zvolte, které boty povolit
- 2Doplňte adresu sitemapy
- 3Zkopírujte soubor do kořene webu a ověřte ho scannerem
FAQ
Časté otázky
Zmizí web z Googlu, když zablokuji GPTBot?
Ne. GPTBot slouží jen OpenAI k trénování. Googlebot, Bingbot i vyhledávací bot ChatGPT (OAI-SearchBot) se řídí vlastními pravidly.
Kam soubor nahraji?
Do kořene domény: https://vasedomena.cz/robots.txt. Na jiné adrese ho boti nehledají.