Die Seite in einer XML-Sitemap aufführen, die Crawler selbst finden
Beschreibung
Dieses Kriterium prüft, ob Ihre Website eine XML-Sitemap veröffentlicht, ob diese Datei gültig ist und ob die analysierte Seite darin steht. iPand sucht die Sitemap in den Sitemap:-Zeilen der robots.txt, dann unter den Adressen /sitemap.xml und /sitemap_index.xml.
Die Datei muss dem Format von sitemaps.org folgen: höchstens 50.000 Adressen und 50 MB unkomprimiert. Einem Sitemap-Index folgt iPand eine Ebene tief, bis zu 10 Dateien derselben Website.
Warum es für KI-Assistenten zählt
Die Sitemap gibt Suchmaschinen die Liste der zu crawlenden Seiten, auch der Seiten, auf die nur wenige Links verweisen. Bing betont, dass sie ein grundlegendes Signal bleibt, damit alle Seiten einer Website gefunden und indexiert werden, auch für die Antworten von Copilot.
- Ohne Sitemap wird eine schwach verlinkte Seite auf einer großen oder neuen Website womöglich erst spät von Crawlern entdeckt.
- Eine Sitemap:-Zeile in robots.txt ermöglicht jedem Crawler, die Datei selbst zu finden, ohne Anmeldung bei jeder einzelnen Suchmaschine.
- Bing liest eine angegebene Sitemap in der Regel mindestens einmal täglich neu und stützt sich auf ihre <lastmod>-Daten, um zu entscheiden, welche Seiten erneut gecrawlt werden.
So korrigieren Sie es
- 1 Veröffentlichen Sie eine XML-Sitemap Die meisten CMS und SEO-Plug-ins erzeugen sie für Sie: Aktivieren Sie diese Option. Andernfalls erstellen Sie eine UTF-8-kodierte XML-Datei im Format von sitemaps.org: ein Element <urlset>, dann ein Element <url> pro Seite, mit ihrer vollständigen Adresse in <loc>.
- 2 Geben Sie die Sitemap in robots.txt an Fügen Sie robots.txt eine Zeile Sitemap: hinzu, gefolgt von der vollständigen Adresse der Datei, zum Beispiel Sitemap: https://www.example.com/sitemap.xml. Sie können mehrere angeben. Reichen Sie die Sitemap auch in der Search Console und in den Bing Webmaster Tools ein, um zu verfolgen, wie sie gelesen wird.
- 3 Halten Sie die Grenzen des Formats ein Eine Datei darf in entpacktem Zustand weder 50.000 Adressen noch 50 MB überschreiten und keine DOCTYPE-Deklaration enthalten. Darüber hinaus verteilen Sie die Adressen auf mehrere Sitemaps, die ein Index (<sitemapindex>) zusammenfasst. iPand liest eine Index-Ebene und höchstens 10 Sitemaps derselben Website: Führen Sie Ihre wichtigen Seiten in den ersten auf.
- 4 Nehmen Sie die Seite in die Sitemap auf Tragen Sie die Adresse der Seite so ein, wie sie veröffentlicht ist: gleiches Protokoll (https), gleiche Domain (mit oder ohne www) und gleicher Pfad. Nehmen Sie nur Seiten auf, die mit 200 antworten und indexiert werden sollen, also ihre kanonischen Adressen.
Fazit
Eine gültige Sitemap, die in robots.txt angegeben ist, zeigt Crawlern jede Ihrer wichtigen Seiten. Prüfen Sie, ob die analysierte Seite darin steht, unter ihrer richtigen Adresse.
