Google lägger till nya Googlebot Crawlers: GoogleOther-Image och GoogleOther-Video

Intro

Google har introducerat två nya webbsökare till Googlebot-familjen:

• GoogleÖvrig bild

• GoogleÖvrig video

Dessa nya crawlers är utformade för att förbättra crawlingen av binär data, vilket Google uppger kommer att stödja forskning och utveckling.

Lär dig mer om AI:s inverkan på SEO och digital marknadsföring.

Introduktion till de nya sökrobotarna

De två nya crawlers, GoogleOther-Image och GoogleOther-Video, är optimerade versioner av GoogleOther för att hämta bild- respektive videobytes. GoogleOther lades ursprungligen till i april 2023 för att användas internt av Google-team för att genomsöka den offentliga webben och därigenom frigöra resurser för de huvudsakliga Googlebot-crawlarna.

Upptäck fördelarna med att integrera användargenererat innehåll.

GoogleÖvrig bild

GoogleOther-Image är den version av GoogleOther som är skräddarsydd för att hämta offentligt tillgängliga bild-URL:er. Enligt dokumentationen kommer den att fungera under användaragent-tokens för GoogleOther-Image och GoogleOther. Den fullständiga användaragentsträngen kommer att vara GoogleOther-Image/1.0.

Utforska strategier för att förbättra innehållets korrekthet.

GoogleÖvrig video

GoogleOther-Video är den version av GoogleOther som är avsedd för att hämta webbadresser till offentligt tillgängliga videor. På samma sätt som GoogleOther-Image kommer den att använda användaragenttoken för GoogleOther-Video och GoogleOther. Den fullständiga användaragentsträngen kommer att vara GoogleOther-Video/1.0.

Läs om framtiden för AI inom digital annonsering.

Syftet med de nya sökrobotarna

Google lanserade dessa nya crawlers för att bättre stödja crawling av binär data som kan användas för forskning och utveckling. Detta initiativ syftar till att förbättra Googles förmåga att hantera bild- och videodata på ett effektivt sätt.

Förstå vilken roll riktlinjer har i AI-driven marknadsföring.

Översikt över Googles sökrobotar

Google använder olika typer av sökrobotar, inklusive:

• Googlebot: Den huvudsakliga sökroboten för Googles sökprodukter, som alltid respekterar robots.txt-reglerna.

• Crawlers för specialfall: Dessa crawlers utför specifika funktioner ( t. ex. AdsBot) och kanske inte följer reglerna i robots.txt.

• Användarutlösta hämtningar: Verktyg och produktfunktioner där slutanvändaren utlöser en hämtning. Till exempel kommer Google Site Verifier eller vissa Google Search Console-verktyg att skicka Google för att hämta sidan baserat på en användaråtgärd.

Lär dig mer om hur du skapar högkvalitativt innehåll med AI.

Googles IP-adressintervall och DNS-masker

Google har listat IP-adressområden och omvända DNS-masker för varje typ av sökrobot:

• Googlebot: googlebot.json (crawl----.googlebot.com eller geo-crawl----.geo.googlebot.com)

• Sökrobotar för specialfall: special-crawlers.json (hastighetsbegränsad proxy----.google.com)

• Användarutlösta hämtare: user-triggered-fetchers.json (---.gae.googleusercontent.com)

Utforska etiken kring AI i reklam.

Varför detta är viktigt

För dem som övervakar crawling-aktiviteter och bot-aktivitet på sina webbplatser är det viktigt att känna igen dessa nya GoogleOther-crawlers som legitima Googlebots. När du ser aktivitet från dessa crawlers i dina loggfiler kan du vara säker på att den är äkta och en del av Googles ansträngningar att förbättra sina sök- och datahanteringsfunktioner.

Förstå vikten av innehållsbegränsningar i AI-verktyg.