# Robots.txt optimisé pour les moteurs de recherche et IA User-agent: * Allow: / # Sitemap Sitemap: https://www.ysacademy-formations.lu/sitemap.xml # Autoriser explicitement les crawlers IA User-agent: GPTBot Allow: / User-agent: ChatGPT-User Allow: / User-agent: CCBot Allow: / User-agent: anthropic-ai Allow: / User-agent: Claude-Web Allow: / User-agent: PerplexityBot Allow: / User-agent: Google-Extended Allow: / # Bloquer les URLs avec préfixes de langue (redirigent vers les canoniques) Disallow: /en/ Disallow: /fr/ Disallow: /de/ Disallow: /lb/ # Bloquer les pages admin et auth Disallow: /admin Disallow: /auth Disallow: /login Disallow: /account Disallow: /booking/success Disallow: /booking/cancel Disallow: /contact-success # Allow key content areas Allow: /formations/ Allow: /about Allow: /contact Allow: /landing/ Allow: /inscription Allow: /devis Allow: /mentions-legales Allow: /politique-cookies