Lister la page dans un sitemap XML que les robots trouvent seuls
Description
Ce critère vérifie que votre site publie un sitemap XML, que ce fichier est valide et que la page analysée y figure. iPand cherche le sitemap dans les lignes Sitemap: de robots.txt, puis aux adresses /sitemap.xml et /sitemap_index.xml.
Le fichier doit suivre le format sitemaps.org : 50 000 adresses et 50 Mo décompressés au plus. Un index de sitemaps est suivi sur un niveau, jusqu’à 10 fichiers du même site.
Pourquoi c’est important pour les IA
Le sitemap donne aux moteurs la liste des pages à explorer, y compris celles que peu de liens désignent. Bing rappelle qu’il reste un signal de base pour que toutes les pages d’un site soient découvertes et indexées, y compris pour les réponses de Copilot.
- Sans sitemap, une page peu reliée aux autres, sur un grand site ou un site récent, risque d’être découverte tard par les robots.
- Une ligne Sitemap: dans robots.txt permet à chaque robot de trouver le fichier seul, sans inscription moteur par moteur.
- Bing relit un sitemap déclaré au moins une fois par jour en général, et s’appuie sur ses dates <lastmod> pour choisir les pages à explorer de nouveau.
Comment corriger
- 1 Publiez un sitemap XML La plupart des CMS et des extensions de référencement le génèrent pour vous : activez cette option. Sinon, créez un fichier XML encodé en UTF-8 au format sitemaps.org : un élément <urlset>, puis un élément <url> par page, avec son adresse complète dans <loc>.
- 2 Déclarez-le dans robots.txt Ajoutez à robots.txt une ligne Sitemap: suivie de l’adresse complète du fichier, par exemple Sitemap: https://www.exemple.fr/sitemap.xml. Vous pouvez en déclarer plusieurs. Soumettez-le aussi dans la Search Console et dans Bing Webmaster Tools pour suivre sa lecture.
- 3 Respectez les limites du format Un fichier ne doit pas dépasser 50 000 adresses ni 50 Mo une fois décompressé, ni contenir de déclaration DOCTYPE. Au-delà, répartissez les adresses dans plusieurs sitemaps réunis par un index (<sitemapindex>). iPand lit un niveau d’index et 10 sitemaps du même site au plus : placez vos pages importantes dans les premiers.
- 4 Ajoutez la page au sitemap Inscrivez l’adresse de la page telle qu’elle est publiée : même protocole (https), même domaine (avec ou sans www) et même chemin. N’y mettez que des pages qui répondent 200 et que vous voulez voir indexées, c’est-à-dire leurs adresses canoniques.
À retenir
Un sitemap valide et déclaré dans robots.txt indique aux robots chacune de vos pages importantes. Vérifiez que la page analysée y figure, à sa bonne adresse.