Boți AI (GPTBot, ClaudeBot, PerplexityBot): cum îi permiți sau îi blochezi în robots.txt
Boți AI în robots.txt: ce fac GPTBot, OAI-SearchBot, ClaudeBot și PerplexityBot, cum separi antrenarea de căutare și ce reguli copiezi, cu limite clare.
Pe scurt
AI Overviews sunt rezumatele generate de AI pe care Google le afișează în pagina de rezultate, cu linkuri către surse. Pentru a fi folosit ca link de suport, conținutul tău trebuie să îndeplinească o singură condiție tehnică: pagina să fie indexată și eligibilă să apară în Google Search cu snippet. Nu există markup special, fișier special sau „setare AI”. Restul ține de calitatea și utilitatea conținutului.
Articolul explică, pe baza documentației Google, ce știm sigur, ce controale ai, cum verifici în Search Console dacă apari și ce nu poate promite nimeni. Dacă vrei imaginea de ansamblu a vizibilității în motoarele AI, începe cu ghidul GEO; pentru implementare, vezi serviciul de optimizare GEO.
AI Overviews sunt rezumate generate automat, afișate de Google deasupra sau printre rezultatele clasice, pentru anumite interogări. AI Mode este o experiență separată, conversațională, pentru întrebări care cer explorare, raționament sau comparații complexe. În ambele cazuri, răspunsul este însoțit de linkuri către pagini web.
Un detaliu tehnic important din documentația Google: aceste funcții pot folosi „query fan-out”, adică lansează mai multe căutări înrudite, pe subteme și din surse diferite, pentru a construi răspunsul. Consecința pentru tine: linkurile afișate pot proveni dintr-o gamă mai largă de pagini decât cele din primele poziții ale unei căutări obișnuite. O pagină care răspunde bine la o subîntrebare poate fi folosită chiar dacă nu domină interogarea principală.
Disponibilitatea funcțiilor diferă în funcție de țară, limbă și tipul interogării. Verifică în contul tău de Search Console și prin căutări reale dacă sunt active pentru publicul tău.
Documentația spune că o pagină trebuie să fie indexată și eligibilă să fie afișată în Search cu snippet. Dincolo de asta, nu există cerințe suplimentare și nici optimizări speciale necesare. Practic, ai trei verificări:
nosnippet sau un max-snippet foarte mic reduc sau elimină eligibilitatea de a fi afișată cu text.Mai spune Google că sistemele sale generative folosesc conținut public și accesibil pentru crawl. Asta e și motivul pentru care site-urile cu conținut generat doar prin JavaScript, fără HTML util la randare, riscă probleme; detalii în ghidul JavaScript SEO.
Documentația Google pune accent pe conținut unic, util și scris pentru oameni, nu pe conținut banal, care repetă ce se găsește peste tot. Merită traduse în practică câteva idei:
Google spune și ce nu e necesar: să scrii într-un mod special pentru funcțiile generative sau să fragmentezi forțat textul în bucăți mici. Nici variantele multiple ale aceleiași pagini nu ajută; dimpotrivă, paginile create doar ca să manipuleze clasarea pot intra sub politicile anti-spam.
Să presupunem că cineva întreabă: „Cum aleg un contabil pentru un SRL nou?”. Un sistem cu query fan-out poate descompune întrebarea în subteme, de exemplu: ce servicii include un abonament, cum se calculează prețul, ce documente cer contabilii la început, cum verifici autorizarea, ce întrebări pui la prima discuție. Nu știm exact ce subinterogări lansează Google pentru o căutare anume, deci exemplul este o ilustrare logică, nu o descriere a algoritmului.
Ce înseamnă asta pentru o pagină care vrea să fie utilă în astfel de situații:
Observă că nimic din listă nu e „specific AI”. Sunt practici de redactare utile și pentru un om care citește pagina. Aceasta este, de fapt, concluzia documentației Google: funcțiile generative se sprijină pe aceleași sisteme de calitate ca și restul căutării.
Un risc frecvent este să tratezi AI Overviews ca pe un canal separat și să abandonezi optimizarea clasică. Documentația spune contrariul: bunele practici SEO rămân relevante. Paginile pe care Google le înțelege și le consideră utile pentru căutarea obișnuită sunt materia primă pentru funcțiile generative. Prin urmare:
Nu. Documentația este explicită: nu există un schema.org special pentru funcțiile generative, iar fișierele create pentru AI, inclusiv llms.txt, nu sunt folosite de Google Search. Datele structurate rămân utile: ajută la rezultate îmbogățite și la clarificarea entităților. Ghidul schema.org în JSON-LD arată ce merită implementat. Dar nu le prezenta nimănui drept „cheia către AI Overviews”.
Google indică aceleași controale ca pentru snippet-urile clasice:
| Control | Ce face | Compromisul |
|---|---|---|
nosnippet | Împiedică afișarea oricărui fragment de text din pagină | Pierzi și snippet-ul clasic |
data-nosnippet | Exclude o porțiune din pagină (atribut HTML) | Folosește-l chirurgical, nu pe tot conținutul |
max-snippet:N | Limitează lungimea fragmentului | Prea mic poate reduce eligibilitatea |
noindex | Scoate pagina din Search | Dispare complet din rezultate |
| Google-Extended în robots.txt | Controlează folosirea pentru Gemini (antrenare, grounding) | Nu afectează Search și nu controlează AI Overviews |
Ultimul rând produce frecvent confuzie. Documentația Google descrie Google-Extended ca token în robots.txt pentru anumite produse AI ale Google și precizează că nu influențează includerea în Search și nu este semnal de clasare. Dacă vrei să nu fii folosit în AI Overviews, nu e instrumentul potrivit; despre boții AI în general citește ghidul despre robots.txt și boții AI.
Documentația spune că traficul din aceste funcții se numără în raportul de Performanță, în tipul de căutare „Web”. În plus, Google a anunțat un raport dedicat, „Generative AI performance”, care arată afișările în funcțiile generative, grupate pe pagini, țări, date și dispozitive. Potrivit paginii de ajutor, la 31 august 2026 raportul a fost extins la toate site-urile din lume; dacă nu apare în contul tău sau arată puține date, motivul poate fi numărul mic de afișări.
Cum îl folosești:
Ghidul general pentru instrument este Google Search Console pentru începători. Ai grijă la instrumentele terțe care pretind că măsoară „intern” poziția în AI Overviews: ele pot doar estima, fiindcă nu au acces la sistemele interne ale Google. Metodele de măsurare pentru toate motoarele AI sunt în ghidul despre vizibilitatea în ChatGPT și căutarea AI.
nosnippet global fără a înțelege costul. Pierzi snippet-urile clasice și controlul asupra modului în care apari.AI Overviews nu cer un manual nou, ci un SEO făcut cu atenție: indexare, conținut util și original, snippet eligibil. Ca pași următori, verifică cele 20 de pagini, rescrie începuturile, curăță suprapunerile și deschide raportul din Search Console. Dacă vrei ajutor, pagina de optimizare GEO descrie cum lucrăm.
Întrebări frecvente
Sunt două funcții diferite din Google Search, dar documentația le tratează împreună în privința eligibilității. AI Overviews apar ca rezumat în pagina de rezultate; AI Mode este o experiență conversațională mai amplă, potrivită întrebărilor complexe. Ambele afișează linkuri către surse.
Da, indirect. Folosește nosnippet, data-nosnippet, max-snippet sau noindex, controale care limitează afișarea conținutului în Search. Costul este că limitezi și snippet-urile clasice. Blocarea Google-Extended nu are acest efect, fiindcă acel token privește alte produse.
Nu sunt necesare. Google spune că nu există schema.org special pentru funcțiile generative. Datele structurate rămân utile pentru rezultate îmbogățite și pentru claritatea entităților, dar nu sunt o condiție de apariție în AI Overviews.
Da, se poate. Funcția compune răspunsul din mai multe căutări înrudite și poate alege linkuri diferite de cele din primele poziții clasice. Poziția bună nu garantează citarea, dar paginile bine clasate au, în general, mai multe șanse să fie considerate.
În Search Console, trafic și afișări din aceste funcții intră în raportul de performanță, iar Google a introdus și un raport dedicat de performanță pentru funcțiile AI generative. Verifică disponibilitatea în contul tău și compară pagini, țări și perioade.
Serviciul asociat
Citește și
Boți AI în robots.txt: ce fac GPTBot, OAI-SearchBot, ClaudeBot și PerplexityBot, cum separi antrenarea de căutare și ce reguli copiezi, cu limite clare.
llms.txt explicat fără hype: format, exemplu complet, ce spune Google, ce se știe despre efect și când merită sau nu să-l publici pe site-ul tău.
GEO (optimizare pentru motoare AI) explicat onest: ce funcționează, ce spune Google, ce e mit și un plan de 30 de zile pentru a fi citat în răspunsuri AI.
Trimite-ne adresa site-ului și îți răspundem cu o analiză inițială gratuită și o strategie concretă de optimizare SEO — fără obligații.