# robots.txt — Extypis
# Plateforme d'écriture pour auteurs francophones
# Servi avec Cache-Control: no-transform pour empêcher l'injection Cloudflare

User-agent: *
Allow: /

# Bloquer les espaces privés utilisateur
Disallow: /write/
Disallow: /dashboard/
Disallow: /admin/
Disallow: /auth/

# Bloquer les APIs privées et endpoints sensibles
Disallow: /api/auth/
Disallow: /api/admin/
Disallow: /api/user/
Disallow: /api/projects/
Disallow: /api/upload/

# Bloquer les pages utilitaires à faible contenu
Disallow: /access-denied
Disallow: /unsubscribe
Disallow: /subscribe/success

# Bloquer les fichiers techniques
Disallow: /dictionaries/
Disallow: /_next/
Disallow: /node_modules/
Disallow: /.well-known/
Disallow: /test-*
Disallow: /dev/
Disallow: /staging/

# ─── Moteurs de recherche ────────────────────────────────────────────────────

User-agent: Googlebot
Allow: /
Crawl-delay: 1

User-agent: Googlebot-Image
Allow: /

User-agent: Bingbot
Allow: /
Crawl-delay: 1

User-agent: msnbot
Allow: /

# ─── Crawlers IA — indexation autorisée ──────────────────────────────────────

# OpenAI — ChatGPT
User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: OAI-SearchBot
Allow: /

# Anthropic — Claude
User-agent: ClaudeBot
Allow: /

User-agent: Claude-Web
Allow: /

User-agent: anthropic-ai
Allow: /

# Google AI Overviews (SGE)
User-agent: Google-Extended
Allow: /

# Perplexity
User-agent: PerplexityBot
Allow: /

# Meta AI
User-agent: Meta-ExternalAgent
Allow: /

# Amazon
User-agent: Amazonbot
Allow: /

# Common Crawl
User-agent: CCBot
Allow: /

# You.com
User-agent: YouBot
Allow: /

# Cohere
User-agent: cohere-ai
Allow: /

# ─── Réseaux sociaux ─────────────────────────────────────────────────────────

User-agent: facebookexternalhit
Allow: /

User-agent: FacebookBot
Allow: /

User-agent: Twitterbot
Allow: /

User-agent: LinkedInBot
Allow: /

# ─── Sitemap ──────────────────────────────────────────────────────────────────

Sitemap: https://extypis.app/sitemap.xml