Dacă site-ul tău blochează Googlebot-Image sau alți crawleri prin robots.txt, nu ești „protejat", ești invizibil în AI Overviews. Datele lui John Shehata arată că cele mai multe redacții și branduri pierd trafic și vizibilitate din această confuzie. Iată ce înseamnă concret în 2026.

robots.txt nu face ce crezi tu că face în 2026

Mulți proprietari de site-uri, redactori-șefi și chiar specialiști SEO cu experiență au ajuns la aceeași concluzie greșită: dacă blochezi anumiți crawleri Google prin robots.txt, ești în siguranță față de AI Overviews. Nu ești.

Datele prezentate de John Shehata, analist cu experiență solidă în SEO editorial, arată că setările incorecte de robots.txt nu exclud un site din AI Overviews. Dimpotrivă, îl exclud din secțiunile clasice de indexare, din Google News și din Top Stories, acolo unde traficul organic încă există și poate fi măsurat. Rezultatul: pierzi vizibilitate reală, dar rămâi prezent în zona în care nu poți atribui niciun clic.

Problema nu este că AI Overviews este rău sau bun. Problema este că operatorii de site-uri iau decizii tehnice fără să înțeleagă exact ce face fiecare directivă de crawl. Iar în 2026, când Google continuă să extindă prezența AI Overviews în rezultatele de căutare, costul acestei confuzii crește săptămână de săptămână.

Ce sunt AI Overviews și de ce contează pentru branduri

AI Overviews sunt blocurile generate automat de Google care apar deasupra rezultatelor clasice pentru o parte tot mai mare din interogări. Google le construiește pe baza conținutului indexat, dar logica de selecție a surselor nu este identică cu cea din căutarea clasică.

Un brand sau un publisher poate apărea în AI Overviews fără să primească un clic direct. Și poate fi exclus din rezultatele clasice dacă robots.txt este configurat greșit, pierzând astfel și traficul atribuibil. Cele două mecanisme funcționează în paralel, nu se anulează reciproc.

Pentru branduri, miza este dublă. Pe de o parte, vizibilitatea în AI Overviews contribuie la notorietate și la autoritate percepută, chiar dacă nu generează clic imediat. Pe de altă parte, absența din Top Stories și din indexarea clasică înseamnă pierdere directă de trafic și, implicit, de venituri din reclame sau conversii.

Dacă ești curios cum arată un site construit de la zero cu această logică în minte, adică pregătit atât pentru căutarea clasică, cât și pentru agenții AI, articolul despre cum Lumiex.ro a adoptat Citera pentru compatibilitate cu Google și agenții AI arată un caz concret din piața românească.

Ce setare greșită costă cel mai mult

Shehata identifică un pattern repetat: publisherii blochează Googlebot-Image cu intenția de a proteja conținutul vizual, dar directiva se propagă și afectează indexarea generală a paginilor în anumite contexte. Alte site-uri blochează complet crawlerea prin directive generice (User-agent: *), crezând că astfel opresc doar scraperele, nu și Google.

Realitatea tehnică este simplă. Dacă Google nu poate crawla și indexa o pagină, nu o poate include în Top Stories. Dacă nu o include în Top Stories, nu o poate folosi ca sursă primară în AI Overviews pentru interogările de știri. Lanțul este logic și strict.

Costul concret: redacțiile și brandurile cu conținut editorial care au aceste setări greșite raportează scăderi de trafic din căutare fără o cauză aparentă. Nu au penalizări manuale, nu au probleme de conținut, dar vizibilitatea scade constant. Diagnosticul corect vine abia după un audit tehnic detaliat al fișierului robots.txt și al logurilor de crawl.

Același principiu se aplică și pentru site-urile de e-commerce sau de servicii care publică articole de blog sau ghiduri. Dacă crawlerul nu ajunge la acel conținut, el nu există pentru AI.

Ce înseamnă pentru tine, ca antreprenor sau marketer român

Să traducem asta în termeni practici pentru piața românească din 2026.

Dacă ai un magazin online, un site de servicii sau o platformă editorială și ai instalat vreodată un plugin de securitate, un generator de robots.txt sau ai copiat o configurație de pe un forum, există o șansă reală ca setările tale să blocheze mai mult decât intenționai.

Primul pas concret: du-te la site.ro/robots.txt și citește fișierul. Dacă vezi directive de tipul Disallow: / sub User-agent: Googlebot sau User-agent: *, ai o problemă. Dacă nu știi să interpretezi ce citești, cere un audit SEO tehnic, nu presupune că totul este în regulă.

Al doilea pas: verifică Google Search Console, secțiunea de acoperire a indexului și, dacă ai articole de știri sau de blog, raportul de performanță pentru interogările care ar trebui să îți aducă trafic editorial. Dacă impresiile sunt zero pentru conținut proaspăt, cauza poate fi chiar robots.txt.

Al treilea pas: înțelege că optimizarea pentru AI Overviews nu este o disciplină separată de SEO. Este aceeași fundație tehnică, același conținut bine structurat, aceleași semnale de autoritate. Subiectul este acoperit mai pe larg și în analiza despre uneltele SEO în 2026 care merită investiția, unde veți găsi și criterii clare de prioritizare a bugetului.

Cum se schimbă auditul SEO tehnic în contextul AI Search

Înainte de 2024, auditul de robots.txt era o verificare de rutină, bifată rapid. Acum este o prioritate, pentru că impactul unui fișier greșit s-a multiplicat.

În 2026, un audit SEO tehnic complet trebuie să includă:

Verificarea directivelor robots.txt pe fiecare User-agent relevant, inclusiv Googlebot, Googlebot-Image, Googlebot-News și crawlerele asociate Google AIO.

Analiza logurilor de server pentru a vedea ce crawlere ajung efectiv pe site și ce pagini sunt ignorate.

Testarea în Google Search Console prin instrumentul de inspecție URL, pentru a confirma că paginile prioritare sunt indexabile.

Monitorizarea impresiilor în AI Overviews prin datele disponibile în Search Console, funcționalitate extinsă de Google în cursul anului trecut.

Corelarea cu datele de trafic pentru a identifica dacă scăderile de vizite sunt legate de crawl sau de altă cauză, de exemplu modificări de algoritm sau concurență crescută.

Aceasta nu este muncă pentru un tool automat. Este muncă pentru un specialist care știe să citească datele și să conecteze punctele.

FAQ: întrebări frecvente despre robots.txt și AI Overviews

Dacă blochez Googlebot prin robots.txt, Google nu mă mai include în AI Overviews?

Nu neapărat direct, dar indirect da. Google poate folosi surse cached sau informații din alte indexuri, dar fără crawl activ, conținutul tău proaspăt nu va apărea în AI Overviews pentru interogări recente. Pierzi în special vizibilitatea pentru știri și conținut nou.

robots.txt este singura cauză pentru care un site lipsește din AI Overviews?

Nu. Alte cauze includ: autoritate de domeniu scăzută, conținut care nu corespunde interogărilor, absența structurii de date (schema markup), viteza mică de indexare sau pur și simplu faptul că Google selectează surse considerate mai relevante pentru acea interogare specifică. robots.txt este prima verificare, nu singura.

Trebuie să fac ceva special pentru a apărea în AI Overviews față de căutarea clasică?

Fundația este aceeași: conținut clar, bine structurat, indexabil, cu autoritate. Nu există un tag sau o directivă specială care te „înscrie" în AI Overviews. Ceea ce poți face este să elimini obstacolele tehnice și să produci conținut care răspunde direct la întrebări, format pe care modelele AI îl preferă ca sursă.

AI analizează, omul decide, ALLSoft Agency execută

Instrumentele AI sunt utile pentru a identifica pattern-uri în volume mari de date, de exemplu pentru a scana mii de URL-uri și a detecta directive de robots.txt problematice sau pentru a corela scăderile de trafic cu schimbările de crawl. Dar interpretarea acestor date, decizia privind ce se schimbă și ordinea de prioritate rămân responsabilitatea unui media buyer sau specialist SEO cu experiență reală pe piața românească.

La ALLSoft Agency facem exact asta: combinăm analiza cu AI cu execuția umană, fără să vindem hype și fără să promitem că un tool rezolvă problemele structurale ale unui site. Dacă vrei un audit SEO tehnic real, care să includă verificarea robots.txt, analiza indexării și o privire clară asupra vizibilității tale în AI Overviews în 2026, scrie-ne direct. Cifrele concrete, nu slide-uri.