# --- Basis: alles indexierbar, außer explizit gesperrte Bereiche ---
User-agent: *
Allow: /
Disallow: /private/

# Einzeldateien explizit freigeben (nicht zwingend nötig, aber klarer)
Allow: /google.csv
Allow: /meta.csv
Allow: /locations.csv
Allow: /amazon.xml

# Sitemaps (falls vorhanden – am besten wirklich anlegen)
# Optional weitere Sitemaps:
# Sitemap: https://feeds.vegenergy.at/sitemap-google.xml
# Sitemap: https://feeds.vegenergy.at/sitemap-meta.xml

# --- KI-/Crawler-spezifische Freigaben (alle explizit erlaubt) ---
User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: CCBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: Claude-Web
Allow: /

User-agent: PerplexityBot
Allow: /