# Règles communes à tous les robots, y compris les crawlers des agents IA : # la visibilité du site dans les réponses des IA suit la même logique que le # référencement classique, donc pas de traitement restrictif spécifique. # # Bots de récupération à la demande (répondent à une question précise d'un # utilisateur, citent/renvoient généralement vers la source) : User-agent: ChatGPT-User User-agent: OAI-SearchBot User-agent: Claude-User User-agent: Claude-SearchBot User-agent: PerplexityBot User-agent: Perplexity-User User-agent: DuckAssistBot # # Bots d'exploration pour l'entraînement de modèles : User-agent: GPTBot User-agent: ClaudeBot User-agent: anthropic-ai User-agent: Google-Extended User-agent: Applebot-Extended User-agent: Amazonbot User-agent: Meta-ExternalAgent User-agent: CCBot User-agent: Bytespider # # Tous les autres robots (moteurs de recherche classiques, etc.) : User-agent: * Allow: / # Comptes utilisateurs, authentification : aucune valeur SEO, ne doivent pas être indexés Disallow: /user/ Disallow: /deconnexion Disallow: /token/ # Pages de résultats de recherche internes (contenu dupliqué / thin content) Disallow: /search/ Disallow: /opensearch/ # Serveur MCP (API pour agents IA, pas une page de contenu) Disallow: /_mcp # Formulaires d'action, sans contenu propre à indexer Disallow: /*/ajouter Disallow: /*/supprimer Disallow: /*/nouveau Disallow: /*/enregistrer Disallow: /*/fusionner Disallow: /*/rechercher Sitemap: https://www.statis-tir.fr/sitemap.xml