# ViralFactory robots.txt
# Letzte Aktualisierung: 2025-08-09

# Standard Regeln für alle Bots
User-agent: *
Allow: /

# Erlaubte Bereiche
Allow: /directory/
Allow: /tools/
Allow: /guides/
Allow: /blog/
Allow: /resources/
Allow: /assets/
Allow: /api/public/

# Nicht erlaubte Bereiche
Disallow: /admin/
Disallow: /api/private/
Disallow: /includes/
Disallow: /vendor/
Disallow: /config/
Disallow: /logs/
Disallow: /tmp/
Disallow: /cache/
Disallow: /backup/
Disallow: /test/
Disallow: /dev/
Disallow: /_/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /cgi-bin/
Disallow: /search?
Disallow: /*?utm_*
Disallow: /*?ref=*
Disallow: /*?source=*
Disallow: /*&utm_*
Disallow: /*&ref=*
Disallow: /*&source=*

# Spezielle Regeln für Google
User-agent: Googlebot
Allow: /
Crawl-delay: 1

# Spezielle Regeln für Bing
User-agent: Bingbot
Allow: /
Crawl-delay: 2

# Spezielle Regeln für Yandex
User-agent: YandexBot
Allow: /
Crawl-delay: 3

# Facebook Bot (für Social Media Previews)
User-agent: facebookexternalhit
Allow: /

# Twitter Bot (für Card Previews)
User-agent: Twitterbot
Allow: /

# LinkedIn Bot
User-agent: LinkedInBot
Allow: /

# WhatsApp Bot
User-agent: WhatsApp
Allow: /

# Discord Bot
User-agent: Discordbot
Allow: /

# Telegram Bot
User-agent: TelegramBot
Allow: /

# Schema.org Validator
User-agent: W3C-checklink
Allow: /

# Archive.org
User-agent: ia_archiver
Allow: /

# Disallow problematische Bots
User-agent: AhrefsBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: BLEXBot
Disallow: /

User-agent: MegaIndex
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: ChatGPT-User
Disallow: /

User-agent: GPTBot
Disallow: /

User-agent: AI2Bot
Disallow: /

User-agent: Claude-Web
Disallow: /

# Sitemap Verweise
Sitemap: https://viralfactory.de/sitemap.xml
Sitemap: https://viralfactory.de/sitemap-images.xml
Sitemap: https://viralfactory.de/sitemap-news.xml

# Host Definition (optional, für Google)
Host: viralfactory.de