Crawl budget
Crawl budget (bugetul de crawl) este numarul de pagini pe care un motor de cautare le acceseaza pe site-ul tau intr-un interval dat. Conteaza la site-uri mari sau cu multe URL-uri parazite, unde Googlebot nu ajunge la paginile importante. La site-uri mici, sub cateva mii de pagini, practic nu e o problema reala.
Exemplu: Magazin cu 50.000 de pagini, dintre care 35.000 sunt URL-uri de filtre si sortari fara valoare. Daca Googlebot crawleaza ~2.000 pagini/zi, ar dura 25 de zile sa parcurga tot. Blochezi prin robots.txt cele 35.000 inutile si raman 15.000 relevante, acoperite in ~7-8 zile, deci continutul nou se indexeaza de peste 3 ori mai repede.
Întrebări frecvente
Crawl budget conteaza pentru orice site?
Nu. Google spune explicit ca site-urile cu pana la cateva mii de URL-uri nu trebuie sa-si faca griji. Devine relevant pentru magazine mari, portaluri sau site-uri cu multe pagini generate dinamic (filtre, parametri, paginare).
Crawl budget e acelasi lucru cu indexarea?
Nu. Crawl-ul e accesarea paginii de catre bot; indexarea e decizia de a o include in rezultate. O pagina poate fi crawl-ata si totusi sa nu fie indexata. Bugetul de crawl influenteaza cat de repede ajunge botul la pagini, nu daca le si pastreaza.
Cum imi optimizez crawl budget-ul?
Elimina URL-urile inutile (parametri, filtre, continut duplicat) prin robots.txt si canonical, repara lanturile de redirect 301, scoate paginile 404 si soft-404, mentine un sitemap.xml curat si imbunatateste viteza serverului ca botul sa acceseze mai multe pagini per sesiune.
Diagnoza o dă AI-ul. Execuția o facem noi.
Înțelegi termenul, noi îți optimizăm contul real, pe baza a sute de campanii. Începe cu un audit gratuit.
Audit site gratuit →