Wat is Bingbot?
Bingbot is een webcrawler die door Microsoft wordt gebruikt om informatie te verzamelen om een doorzoekbare index van het web op te bouwen. Het voedt de Bing-zoekmachine en voert dezelfde taken uit als Googlebot voor Google.
Geschiedenis en activiteit
Bingbot werd gelanceerd in oktober 2010. Volgens Cloudflare Radar is Bingbot de 3de meest actieve crawler ter wereld, met AhrefsBot op de 4de plaats.
Strings voor gebruikersagent
Bingbot gebruikt verschillende user agent-strings om zichzelf te identificeren tijdens het crawlen van websites. De primaire user agent strings voor Bingbot zijn:
Mozilla/5.0 (compatibel; bingbot/2.0; +http://www.bing.com/bingbot.htm)
Mozilla/5.0 AppleWebKit/537.36 (KHTML, zoals Gecko; compatibel; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/W.X.Y.Z Safari/537.36
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, zoals Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatibel; bingbot/2.0; +http://www.bing.com/bingbot.htm)
Webrichtlijnen respecteren
Net als elke andere goede zoekbot respecteert Bingbot de regels in het robots.txt-bestand
en de "nofollow"-richtlijnen op links en pagina's. Dit betekent dat je de toegang van Bingbot tot je site kunt regelen via standaard webprotocollen. Dit betekent dat je de toegang van Bingbot tot de inhoud van je site kunt regelen via standaard webprotocollen.
Andere Bing Crawlers
Naast Bingbot heeft Bing ook andere crawlers voor verschillende doeleinden:
- AdIdxBot: gebruikt voor Bing Ads.
- BingPreview: Wordt gebruikt om snapshots van pagina's te genereren voor previewdoeleinden.
Door Bingbot en zijn gedrag te begrijpen, kunnen webmasters hun websites optimaliseren om ervoor te zorgen dat ze correct worden geïndexeerd door de Bing-zoekmachine, waardoor hun zoekresultaten en zichtbaarheid mogelijk verbeteren.
Ga voor meer informatie over Bingbot en hoe je je website kunt optimaliseren voor Bing naar de officiële pagina van Bing Webmaster Tools.