# ===========================================================
# ScoreGO robots.txt
# ===========================================================
# Content-Signal Erklärung:
#   search=yes   → Suchindex erlaubt
#   ai-input=yes → Grounding/RAG erlaubt (z.B. AI-Antworten)
#   ai-train=no  → Training/Fine-Tuning verboten
#
# Strategie: AI-Crawler dürfen NUR /facts/ lesen,
# damit ScoreGO kontrolliert, welche Fakten AI-Systeme nutzen.
# ===========================================================

# --- Globale Regeln ---
User-agent: *
Content-Signal: search=yes, ai-input=yes, ai-train=no
Allow: /
Disallow: /api/
Disallow: /search

# --- AI-Crawler: nur /facts/ erlaubt ---
User-agent: ClaudeBot
Allow: /facts/
Disallow: /

User-agent: GPTBot
Allow: /facts/
Disallow: /

User-agent: Google-Extended
Allow: /facts/
Disallow: /

User-agent: Applebot-Extended
Allow: /facts/
Disallow: /

User-agent: CCBot
Allow: /facts/
Disallow: /

User-agent: Bytespider
Allow: /facts/
Disallow: /

User-agent: meta-externalagent
Allow: /facts/
Disallow: /

User-agent: Amazonbot
Allow: /facts/
Disallow: /

# --- Sitemap ---
Sitemap: https://scorego-app.com/sitemap.xml