Laat Bing de pagina indexeren, zodat Copilot die kan gebruiken
Beschrijving
Dit criterium controleert of Bing je pagina kan indexeren en Copilot haar kan overnemen: bingbot mag haar lezen, niets vraagt Bing haar niet te indexeren, en noarchive, nocache en de regels voor fragmenten beperken niet hoe Copilot haar mag gebruiken.
iPand meet wat de pagina toestaat, niet of ze echt in de index van Bing staat: dat kan alleen de eigenaar van de site zien, in Bing Webmaster Tools.
Waarom dit belangrijk is voor AI
Copilot steunt op dezelfde basis voor crawlen en indexeren als de zoekfunctie van Bing. Een pagina die Bing niet kan lezen, of die door een instructie wordt uitgesloten, kan geen bron zijn voor zijn antwoorden, ook al is ze goed zichtbaar in Google.
- Een pagina die voor bingbot geblokkeerd is of als noindex gemarkeerd, verschijnt niet in de zoekresultaten van Bing en niet in de antwoorden van Copilot.
- noarchive sluit de pagina uit van de antwoorden van Copilot; nocache beperkt Copilot tot de URL, de titel en het fragment.
- nosnippet, max-snippet:0 en data-nosnippet verhinderen dat Bing een fragment toont en kunnen de citaties van Copilot verzwakken.
Zo los je het op
- 1 Sta bingbot toe in robots.txt Open het bestand robots.txt van je site en verwijder de Disallow-regel die de pagina dekt, zowel in de groep User-agent: bingbot als in de groep *. Bestaat er een groep voor bingbot, dan negeert Bing de groep *: herhaal daar de algemene regels die je ook voor Bing wilt laten gelden.
- 2 Verwijder de instructies die indexering verbieden Zoek naar noindex of none in de tag <meta name="robots">, in <meta name="bingbot"> en in de HTTP-header X-Robots-Tag. Die instructies blijven vaak achter van een testomgeving of worden toegevoegd door een plug-in van je CMS.
- 3 Verwijder noarchive en nocache Moet Copilot de pagina citeren? Verwijder dan noarchive en nocache uit haar robots-tags en uit de header X-Robots-Tag. Houd ze alleen op pagina’s waarvan je niet wilt dat de inhoud in de antwoorden van Copilot terechtkomt.
- 4 Laat Bing een fragment overnemen Verwijder nosnippet en max-snippet:0, en gebruik het attribuut data-nosnippet alleen voor passages die echt niet geciteerd mogen worden (juridische vermeldingen, prijsvoorwaarden), nooit voor de kern van de tekst: iPand meldt een data-nosnippet die de helft van de hoofdtekst of meer beslaat.
- 5 Controleer de indexering in Bing Webmaster Tools Voeg je site toe aan Bing Webmaster Tools en gebruik daarna de tool URL-inspectie: die laat zien of de pagina in de index van Bing staat en waarom ze ontbreekt. Vraag na de correctie opnieuw indexering aan via dezelfde tool.
In het kort
Een pagina die Bing niet kan lezen of indexeren, bestaat niet voor Copilot. iPand controleert elke dag of de pagina dat toestaat; bevestig in Bing Webmaster Tools dat ze in de index staat.