# /robots.txt file
# mail webmaster@papyrus-gmbh.de for constructive criticism

User-agent: ClaudeBot
Disallow: /

User-agent: GPTBot
Disallow: /

# Wird ignoriert, daher siehe block-crawler in /etc/nginx
User-agent: Meta-ExternalAgent
Disallow: /

User-agent: PetalBot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: Amazonbot
Disallow: /

User-agent: *
Disallow: /de/f/
Disallow: /en/f/
Disallow: /de/shop/
Disallow: /en/shop/
Disallow: /de/produktliste/
Disallow: /en/produktliste/
Disallow: /de/zubehoer/
Disallow: /en/zubehoer/
Allow: /de/shop/cart/count
Allow: /en/shop/cart/count
Disallow: /de/showartikel/
Disallow: /en/showartikel/
Disallow: /de/nl/
Disallow: /en/nl
Sitemap: https://papyrus-gmbh.de/sitemap.txt