Mis on Crawl Budget?
Crawli eelarve on aeg ja ressursid, mille otsingumootor määrab konkreetse veebisaidi läbitöötamiseks. Teisisõnu, see on maksimaalne lehekülgede arv, mida otsingumootor saab teie veebisaidil teatud aja jooksul läbida. Erinevate otsingumootorite (või roomikute) puhul võib roomamiseelarve erineda.
Google väidab, et te ei peaks muretsema roomamise eelarve pärast, välja arvatud juhul, kui:
- Teie saidil on üle 1 miljoni unikaalse lehekülje, mille sisu muutub umbes kord nädalas.
- Teil on keskmise suurusega veebisait (umbes 10k lehekülge) ja te muudate sisu sageli (iga päev).
- Te haldate uudiste veebilehte.
- Search Console klassifitseerib enamiku teie saidi URL-aadressidest kui "Avastatud - praegu ei ole indekseeritud".
Iga veebisait saab erineva crawli eelarve, mis põhineb kahel põhiteguril:
- Nõudlus: Määratletakse lehekülgede arvu, postitamise/uuendamise sageduse ja lehekülgede populaarsuse alusel.
- Crawl Rate Limit: Mõjutab serveri võimekus, saidi omaniku poolt Search Console'is määratud crawlimiit, otsingumootori crawlimiit ja Google'i automaatne kohandamine serveri vastamisaja alusel.
Miks on roomamise eelarve oluline?
Crawli eelarve on oluline, sest see mõjutab seda, kui palju lehekülgi saab Googlebot teie saidil crawlida ja kui tihti saab Googlebot teie veebilehti uuesti crawlida, et oma indeksit uuendada. Google'il on tohutud ressursid, kuid ta ei saa siiski kõiki internetilehekülgi krabida (ja regulaarselt uuesti krabida). Selle tulemusena määrab Google veebisaitidele crawlimis-eelarve.
Et tagada, et teie crawli eelarve ei läheks raisku ebaolulistele lehekülgedele, keskenduge oma veebisaidi crawli tõhususe optimeerimisele.
Kuidas suurendada Crawli eelarvet?
1. Kiirendage oma serverit ja vähendage lehekülje laadimisaega
Serveri reageerimisaeg ja lehekülje laadimiskiirus mõjutavad otseselt roomamist. Kui Googlebot krabab teie veebilehte, laeb ta kõigepealt alla ressursse ja seejärel töötleb neid. Kui teie server reageerib kiiresti, saab Googlebot teie veebisaidil rohkem lehekülgi krabida.
- Kasutage kiiret ja usaldusväärset veebimajutusteenust ja sisutaristuvõrku (CDN), et parandada serveri esialgset reageerimisaega.
- Vähendage lehekülje laadimisaega, vältides suurte, kuid mitte-kriitiliste ressursside roomamist robots.txt abil, vältides pikki ümbersuunamisahelaid ning eemaldades rasked ja halvasti kodeeritud teemad ja pistikprogrammid.
2. Lisage rohkem linke
Lehekülje linkide arv näitab selle tähtsust Google'i jaoks. Googlebot eelistab rohkemate tagasiside- ja siselinkidega lehekülgede roomamist. Suurendage oma roomamise eelarvet, lisades oma lehtedele rohkem väliseid ja sisemisi linke.
- Sisemise linkimise soovituste saamiseks auditeerige oma veebisaiti selliste vahenditega nagu Ranktracker's Site Audit.
3. Fikseerige katkised lingid ja vähendage ümbersuunamisi
Liiga palju katkiseid siselinkide (404 või 410 vastusekoodid) ja ümber suunatud URL-ide (3xx) võib raisata teie saidi roomamise eelarvet. Parandage katkised lingid ja mittevajalikud ümbersuunamised, et optimeerida oma crawlimis-eelarvet.
- Kasutage selliseid vahendeid nagu Ranktracker's Site Audit, et leida oma saidilt katkised ja ümbersuunatud URL-id.
4. Võimaluse korral kasutage indekseerimise API-d
Indekseerimise API võimaldab teil teavitada Google'i otse, kui lisate, eemaldate või uuendate oma saidi lehekülgi. See aitab teie lehti kiiremini krabida.
- Märkus: Indekseerimis-API on praegu saadaval konkreetsete kasutusjuhtumite jaoks, näiteks live-videote ja töökuulutuste jaoks.
KKK
Kas Googlebot austab Robots.txt-i roomamisviivitust?
Ei, Googlebot ei austa robots.txt-failis rakendatud crawl-viivituse seadistusi.
Millal peaksite hoolima roomikueelarvest?
Te peaksite hoolitsema crawli eelarve eest, kui teil on väga suur veebileht (üle 1 miljoni lehekülje) või keskmise suurusega veebileht, mille sisu muutub väga sageli (iga päev). Enamik saite ei pea crawli eelarve pärast muretsema.
Kuidas ma saan kontrollida oma veebisaidi Crawli eelarvet?
Te ei leia kuskilt täpset arvu roomikute eelarve kohta. Küll aga saate Google Search Console'i aruandes Crawl Stats vaadata ülevaadet Google'i crawlimisaktiivsusest.
Lisateabe saamiseks oma veebisaidi SEO ja roomamise tõhususe parandamise kohta külastage Ranktracker Blogi ja uurige meie põhjalikku SEO-juhendit. Lisaks tutvuge meie SEO-sõnastikus peamiste SEO-terminite ja -mõistetega.
