# Gîte Chez Vickie — servi depuis gite-chez-vickie.litil.fr. # # RIEN n'est indexé tant que le site vit sur un sous-domaine de litil.fr. Le # jour où il part sur son propre nom de domaine, ce fichier est réécrit et # l'en-tête X-Robots-Tag retiré de infra/Caddyfile.public. # Moteurs de recherche : l'exploration reste AUTORISÉE, volontairement. # L'interdiction d'indexer est portée par l'en-tête HTTP # `X-Robots-Tag: noindex, nofollow, noarchive`, que le moteur ne peut lire # qu'en récupérant la page. Un `Disallow: /` ici neutraliserait donc la seule # directive qui compte, tout en laissant l'URL nue susceptible d'être indexée # si quelqu'un partage le lien. User-agent: * Allow: / # Robots d'entraînement et d'assistants IA : eux ne respectent pas `noindex`. # `robots.txt` est le seul levier dont on dispose, d'où l'interdiction franche. User-agent: GPTBot Disallow: / User-agent: OAI-SearchBot Disallow: / User-agent: ChatGPT-User Disallow: / User-agent: PerplexityBot Disallow: / User-agent: ClaudeBot Disallow: / User-agent: Google-Extended Disallow: / User-agent: CCBot Disallow: / User-agent: Bytespider Disallow: / User-agent: Amazonbot Disallow: / User-agent: Applebot-Extended Disallow: / User-agent: meta-externalagent Disallow: / # Aucune ligne `Sitemap:` : le fichier sitemap.xml reste dans le dépôt, prêt # pour le jour de la mise en ligne sur le vrai domaine, mais rien ne l'annonce.