# Fair4B — robots.txt # Objectif : maximiser la visibilité auprès des moteurs de recherche # ET des IA génératives (Perplexity, ChatGPT, Gemini, Claude...). # ── Crawlers classiques ─────────────────────────────────────────────── User-agent: * Allow: / # La barre finale compte : sans elle, la règle bloque tout chemin commençant # par cette chaîne, y compris une future page /administration-des-ventes. Disallow: /administration/ Disallow: /api/ # ── IA génératives / moteurs de réponse (autorisés explicitement) ───── User-agent: GPTBot Allow: / User-agent: OAI-SearchBot Allow: / User-agent: ChatGPT-User Allow: / User-agent: PerplexityBot Allow: / User-agent: Perplexity-User Allow: / User-agent: Google-Extended Allow: / User-agent: ClaudeBot Allow: / User-agent: Claude-Web Allow: / User-agent: anthropic-ai Allow: / User-agent: Applebot-Extended Allow: / User-agent: CCBot Allow: / User-agent: meta-externalagent Allow: / User-agent: Amazonbot Allow: / User-agent: Bytespider Allow: / User-agent: DuckAssistBot Allow: / User-agent: cohere-ai Allow: / User-agent: YouBot Allow: / User-agent: Ai2Bot Allow: / User-agent: Diffbot Allow: / # ── Sitemap ─────────────────────────────────────────────────────────── Sitemap: https://www.fair4b.com/sitemap.xml # Résumé du site à destination des modèles de langage, au format llms.txt : # llms.txt: https://www.fair4b.com/llms.txt