robots.txt et plan du site

Le plan du site se trouve à l'adresse /sitemap.xml et se génère automatiquement à chaque requête — il n'y a pas de fichier sur le disque et vous n'avez pas besoin d'en créer un. Seules y figurent les pages dont le niveau d'accès est « Tous » ; les versions linguistiques sont listées au sein d'une même entrée, comme l'exige Google. Une rubrique masquée dans une langue donnée (« Rubriques et informeurs par langue » dans l'onglet « Langues du site ») n'apparaît pas dans le plan pour cette langue.

robots.txt s'ouvre à l'adresse /robots.txt : le visiteur et le robot d'indexation voient le texte, tandis que vous voyez un éditeur. Le même texte se modifie aussi dans la fenêtre de la rubrique, via le bouton « Paramètres du module », champ « Contenu de robots.txt ». Un champ vide a ici un sens : il signifie « génère automatiquement », et le moteur écrira lui-même un fichier raisonnable avec un lien vers le plan du site.

La rubrique robots.txt existe sur chaque site, mais elle n'apparaît pas dans le menu — c'est normal.

En cas de problème

• Les modifications de robots.txt ne sont pas visibles. Si un véritable fichier robots.txt se trouve à la racine du site sur le serveur, le serveur web le renvoie et la requête n'atteint pas le moteur. Il faut supprimer ce fichier.
• Une page est absente du plan du site. Vérifiez le niveau d'accès : tout ce qui n'est pas « Tous » n'apparaît pas dans le plan. Les adresses avec extension et les informeurs n'y figurent pas non plus.