Mikä on Googlebot?
Googlebot on nimi Googlen indeksoijille, jotka keräävät tietoja Googlen eri palveluita, kuten hakuindeksiä, varten.
Siitä on kaksi pääversiota: Googlebot Desktop ja Googlebot Smartphone. Mobiili-ensimmäisen indeksoinnin myötä Googlebot Smartphone tuli ensisijaiseksi indeksoijaksi Googlen hakuindeksissä.
Miten Googlebot toimii?
Googlebot indeksoi jatkuvasti verkkoa löytääkseen uusia sivuja, lähettää sivut käsiteltäväksi, jotta ne voidaan lisätä hakuindeksiin, ja indeksoi sivuja uudelleen etsiäkseen uutta/päivitettyä tietoa.
Tämän prosessin aikana Googlebot noudattaa tiukasti robots.txt-tiedostojen sääntöjä ja sivujen ja linkkien indeksoijille annettuja ohjeita.
Miksi Googlebot on tärkeä?
Googlebot on yksi tärkeimmistä työkaluista, jotka pyörittävät koko Googlen hakukonetta. Ilman sitä koko hakua (ja siten SEO:ta) ei olisi olemassa. Jos Googlebot ei indeksoisi verkkosivustoa, sitä ei indeksoitaisi eikä se näkyisi tuloksissa.
SEO-ammattilaisten ja webmasterien on siis ymmärrettävä, miten Googlebot toimii. Lisäksi on tärkeää varmistaa, että indeksoijalla on oikea pääsy sivustolle ilman indeksointi- tai löydettävyysongelmia.
Parhaat käytännöt indeksointiystävällistä verkkosivustoa varten
Jos haluat, että Googlebot indeksoi sivustosi kunnolla ja saa sivut indeksoitua, sinun on varmistettava, että tietyt asiat ovat kunnossa. Koska kyseessä ei ole kertaluonteinen tapahtuma, alla on joitakin parhaita käytäntöjä, joita kannattaa noudattaa säännöllisesti indeksointiystävällisen verkkosivuston ylläpitämiseksi.
1. Tarkista Robots.txt-tiedosto
Verkkosivuston Robots.txt-tiedoston avulla voit hallita sitä, mitä indeksoidaan. Se kommunikoi botsin kanssa indeksointiohjeiden avulla.
Sinun on varmistettava, että robots.txt-tiedostosi ei estä Googlebotia indeksoimasta verkkosivustosi sivuja/osioita, jotka haluat indeksoida.
Etsi seuraavaksi tiedostosta virheitä robots.txt-testityökalujen avulla.
Sinun on varmistettava, että Googlebot pääsee robots.txt-tiedostoon, eli sitä ei ole estetty palvelintasolla.
2. Toimita sivustokartat
Sivukarttojen lähettäminen on yksinkertaisin tapa ilmoittaa Googlelle, mitkä sivut haluat indeksoitavan ja indeksoitavan.
Sitemappien luominen ei ole hankalaa, jos käytät mitä tahansa WordPressin suosittua SEO-lisäosaa, kuten Yoastia tai Rank Mathia. Ne luovat sinulle automaattisesti sitemapit, jotka voit lähettää.
Tuotettu URL-osoite näyttää tältä: verkkotunnus.com/sitemap_index.html.
Jos haluat lähettää sivukartan URL-osoitteen manuaalisesti, sinun on mentävä Google Search Consoleen ja napsautettava "Sitemaps" päävalikon "Index"-osion alla.
3. Käytä indeksoijan direktiivejä viisaasti
Robots.txt-tiedoston lisäksi on olemassa sivutason direktiivejä, jotka ilmoittavat indeksoijille, mitkä sivut saa (tai ei saa) indeksoida.
Sinun on siis varmistettava, että sivuilla, jotka haluat indeksoida, ei ole "noindex"-direktiiviä. Varmista myös, että niillä ei ole "nofollow"-direktiiviä, jos haluat, että myös niiden lähtevät linkit indeksoidaan.
Voit käyttää SEO-työkalupalkkia Chromelle ja Firefoxille tarkistaaksesi sivujesi direktiivit.
4. Sisäisten linkkien tarjoaminen sivujen välillä
Toinen yksinkertainen tapa auttaa sivua indeksoitumaan nopeammin on linkittää se toiselle, jo indeksoidulle sivulle. Koska Googlebot indeksoi sivut uudelleen, se löytää sisäisen linkin ja indeksoi sen nopeasti.
Ryömimisen lisäksi sisäinen linkitys siirtää niin sanottua "linkkimehua" sivuille, mikä lisää niiden PageRankia.
5. Käytä Site Audit löytää indeksoitavuuden ja indeksoitavuuden kysymyksiä
Lopuksi voit käyttää Site Audit -työkaluja löytääksesi sivustojesi indeksoitavuuteen ja indeksoitavuuteen liittyviä ongelmia.
Sivuston tarkastus auttaa sinua löytämään rikkinäiset sivut, liialliset uudelleenohjaukset, uudelleenohjausketjut, indeksoimattomat sivut, nofollow-linkit, orvot sivut (sivut, joilla ei ole sisäisiä linkkejä) ja paljon muuta.
Voit seurata verkkosivustosi SEO-tilannetta ilmaiseksi esimerkiksi Ranktrackerin Web Audit -työkalujen avulla.
UKK
Onko indeksointi ja indeksointi sama asia?
Ei, nämä kaksi eivät ole sama asia. Ryömintä tarkoittaa sivujen ja linkkien löytämistä verkosta. Indeksointi tarkoittaa indeksoinnin aikana löydettyjen sivujen sisällön ja niiden välisten yhteyksien tallentamista, analysointia ja järjestämistä.
Vasta sen jälkeen, kun sivu on indeksoitu, se voidaan näyttää tuloksena asiaankuuluvissa kyselyissä.
Voinko tarkistaa, onko sivustoni indeksoiva indeksoijana todella Googlebot?
Jos olet huolissasi siitä, että roskapostittajat tai muut häiriköt saattavat käyttää verkkosivustoasi väittäen olevansa Google-botteja, voit tarkistaa, onko indeksointiohjelma todella Googlen indeksointiohjelma.
Mikä on Googlebotin pääasiallinen indeksoiva ohjelma?
Googlebot-älypuhelin on nykyään ensisijainen indeksoija.
Käyttäjäagentin tunnus: Googlebot
Täydellinen merkkijono: Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, kuten Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (yhteensopiva; Googlebot/2.1; +http://www.google.com/bot.html)
Täydellinen luettelo Googlebotin indeksoijista löytyy täältä.