# Robots.txt pour Le Livret des Concours # https://lelivretdesconcours.com User-agent: * Allow: / # Bloquer les pages admin et privées Disallow: /dashboard Disallow: /dashboard/* Disallow: /admin Disallow: /admin/* Disallow: /consumer Disallow: /user Disallow: /subscriptions Disallow: /api/ Disallow: /storage/ Disallow: /account-deletion Disallow: /activate-account/ # Bloquer les fichiers sensibles Disallow: /*.json$ Disallow: /*.env$ # Autoriser explicitement le sitemap Allow: /sitemap.xml # Sitemap Sitemap: https://lelivretdesconcours.com/sitemap.xml # Crawl-delay pour ne pas surcharger le serveur Crawl-delay: 1 # Règles spécifiques pour Googlebot User-agent: Googlebot Allow: / Crawl-delay: 0 # Règles pour les bots IA User-agent: GPTBot Allow: / User-agent: Claude-Web Allow: / User-agent: Anthropic-AI Allow: / User-agent: CCBot Allow: /