# See http://www.robotstxt.org/robotstxt.html for documentation on how to use the robots.txt file # # To ban all spiders from the entire site uncomment the next two lines: # User-agent: * # Disallow: / User-agent: * Disallow: /pl/test User-agent: * Disallow: /pl/news # Blokowanie wszystkich standardowych wyszukiwarek (Google, Bing itp.) User-agent: * Disallow: /oswiadczenie/ # Blokowanie popularnych botów AI i crawlerów baz danych User-agent: GPTBot Disallow: /oswiadczenie/ User-agent: ChatGPT-User Disallow: /oswiadczenie/ User-agent: Google-Extended Disallow: /oswiadczenie/ User-agent: Anthropic-ai Disallow: /oswiadczenie/ User-agent: Claude-Web Disallow: /oswiadczenie/ User-agent: CCBot Disallow: /oswiadczenie/ User-agent: PerplexityBot Disallow: /oswiadczenie/