CodeKitHubČo je tento nástroj?
robots.txt je textový súbor v koreňovom adresári vášho webu, ktorý hovorí webovým robotom, ku ktorým častiam webu majú alebo nemajú prístup. Vyhľadávače ako Google a Bing ho pri indexovaní rešpektujú; v roku 2026 je to zároveň štandardný spôsob, akým sa weby odhlasujú z používania svojho obsahu na trénovanie AI modelov, cez konkrétne názvy robotov ako GPTBot, CCBot a Google-Extended.
Na presnej syntaxi záleží — nesprávna cesta Disallow môže omylom zablokovať vyhľadávače na celom webe, alebo pravidlo blokujúce AI umiestnené nesprávne nemusí v skutočnosti zablokovať nič. Tento generátor produkuje syntakticky správny výstup pre každý scenár.
Po takmer troch desaťročiach ako neformálna konvencia siahajúca do roku 1994 bol Robots Exclusion Protocol napokon štandardizovaný ako RFC 9309 v roku 2022 — pravidlá, ktoré tento generátor vytvára (User-agent, Disallow, Allow, plus rozšírenie Sitemap), sa riadia touto špecifikáciou.
Prečo ho používať?
- Dedikovaná predvoľba na blokovanie AI robotov pokrývajúca GPTBot, ChatGPT-User, CCBot, Google-Extended, ClaudeBot, Bytespider a anthropic-ai — pri výslovnom zachovaní prístupu vyhľadávačov.
- Vlastné zakázané cesty pre obsah, ktorý chcete skryť pred všetkými robotmi.
- Pole na URL sitemapy — malý doplnok, ktorý pomáha vyhľadávačom rýchlejšie objaviť vaše stránky.
- Vždy správna syntax — žiadne riziko, že náhodný preklep zablokuje celý váš web.
- Zadarmo, okamžite, stiahnite súbor priamo alebo skopírujte text.
Ako sa používa
- Vyberte predvoľbu: povoliť všetko, zablokovať všetko, alebo zablokovať len AI roboty.
- Voliteľne pridajte vlastné zakázané cesty, jednu na riadok (napr. /admin/).
- Voliteľne pridajte URL svojej sitemapy.
- Kliknite na Kopírovať alebo Stiahnuť a nahrajte súbor do koreňového adresára vášho webu ako /robots.txt.
Príklad
Vstup
Predvoľba: Zablokovať AI roboty, ponechať vyhľadávače. Sitemapa: https://example.com/sitemap.xmlVýstup
User-agent: GPTBot
Disallow: /
User-agent: CCBot
Disallow: /
...
User-agent: *
Allow: /
Sitemap: https://example.com/sitemap.xmlKaždý AI robot dostane vlastné explicitné zablokovanie, zatiaľ čo záverečné pravidlo so zástupným znakom ponecháva bežný prístup vyhľadávačov otvorený.
Mali by ste tohto robota zablokovať?
Nie všetky roboty slúžia rovnakému účelu — zablokovanie nesprávneho môže odrezať návštevnosť z vyhľadávania namiesto toho, aby len odhlásilo obsah z AI trénovania.
| Robot | Čo robí | Zablokujte ho, ak… |
|---|---|---|
| Googlebot, Bingbot | Indexuje váš web pre výsledky vyhľadávania | Nikdy — zablokovanie ich úplne odstráni z vyhľadávania Google/Bing. |
| GPTBot, ChatGPT-User | Roboty OpenAI — GPTBot trénuje modely, ChatGPT-User načítava stránky, ktoré si používateľ nechal prehliadnuť cez ChatGPT | Nechcete, aby sa váš obsah používal na trénovanie AI, ale majte na pamäti, že ChatGPT-User prehliadajúci stránku podľa odkazu používateľa je iný prípad, ktorý niektoré weby volia povoliť. |
| Google-Extended | Riadi, či Google používa váš obsah na trénovanie Gemini/AI — oddelené od indexovania vyhľadávania Googlebotom | Chcete zostať vo vyhľadávaní Google, ale odhlásiť sa z AI trénovania Googlu — táto direktíva to presne robí bez poškodenia umiestnenia. |
| CCBot, Bytespider, anthropic-ai, ClaudeBot | Common Crawl (napája mnoho AI dátových sád), ByteDance, roboty Anthropicu | Rovnaká úvaha ako pri GPTBot — zablokujte, ak nechcete obsah v AI trénovacích dátach. |
Časté otázky
Zabráni robots.txt naozaj tomu, aby AI používala môj obsah?
Funguje na princípe cti — seriózne AI spoločnosti svoje roboty rešpektujú (preto GPTBot, CCBot a podobné existujú ako samostatné, zdokumentované user-agenty, aby sa weby mohli odhlásiť). Nezastaví to roboty, ktoré štandard ignorujú, a nemá to žiadny vplyv na obsah, ktorý bol už zoškrabaný pred pridaním blokovania.
Poškodí zablokovanie AI robotov moje umiestnenie v Google/Bing?
Nie — predvoľba pre AI roboty blokuje výhradne menované AI boty a ponecháva zástupné pravidlo „Allow: /“ pre všetkých ostatných, takže Googlebot a Bingbot nie sú ovplyvnené.
Kam mám súbor robots.txt umiestniť?
Do koreňového adresára vašej domény, aby bol dostupný presne na adrese vasadomena.com/robots.txt — nie v podpriečinku. Väčšina webhostingov a generátorov statických webov má na to určený verejný/koreňový priečinok.
Na čo slúži riadok so sitemapou?
Ukazuje robotom na váš sitemap.xml, ktorý obsahuje zoznam všetkých indexovateľných stránok. Je voliteľný, ale bežne odporúčaný — jeden riadok navyše, ktorý môže urýchliť objavenie nových stránok.
Môžem kombinovať vlastné zakázané cesty s predvoľbou blokovania AI?
Áno — predvoľba blokovania AI pridá najprv blokovanie AI botov a potom aplikuje vaše vlastné zakázané cesty (ak nejaké sú) pod všeobecným zástupným pravidlom, ktoré naďalej povoľuje vyhľadávače.