Noindex
Cunoscut și ca: etichetă noindex, directivă noindex, regulă noindex, noindex tag, meta robots noindex, X-Robots-Tag noindex
Ce înseamnă noindex?
Pe scurt
Noindex este o regulă care solicită motoarelor de căutare compatibile să nu indexeze o pagină sau o resursă. Se implementează printr-o etichetă meta robots ori prin antetul HTTP X-Robots-Tag. Pentru ca Google să o detecteze, crawlerul trebuie să poată accesa URL-ul.
Cum funcționează noindex
Noindex controlează indexarea unei pagini sau resurse. După ce Googlebot accesează URL-ul și identifică regula, Google elimină resursa din rezultatele Google Search, chiar dacă alte site-uri trimit linkuri către ea.
Noindex nu blochează accesarea cu crawlere. Dimpotrivă, crawlerul trebuie să poată accesa resursa pentru a citi regula. Dacă URL-ul este blocat prin robots.txt, Googlebot nu poate vedea noindex. În această situație, URL-ul poate apărea în rezultate pe baza linkurilor găsite în alte pagini.
Metode de implementare
Pentru o pagină HTML, regula poate fi introdusă în secțiunea <head>:
<meta name="robots" content="noindex">
Această variantă se adresează crawlerelor motoarelor de căutare care acceptă regula. Pentru a viza crawlerele web Google, poate fi folosită varianta:
<meta name="googlebot" content="noindex">
Pentru resurse non-HTML, precum documente PDF, imagini sau fișiere video, se poate transmite un antet HTTP:
X-Robots-Tag: noindex
Eticheta meta și antetul HTTP au același efect. Metoda se alege în funcție de tipul resursei și de configurația site-ului. Regula noindex introdusă în robots.txt nu este acceptată de Google.
Când produce efecte
Adăugarea regulii nu elimină instantaneu un URL deja indexat. Google trebuie să acceseze din nou pagina și să citească eticheta sau antetul. Implementarea poate fi verificată în instrumentul URL Inspection din Google Search Console. Raportul Page Indexing poate indica paginile pentru care Googlebot a detectat noindex.
De ce contează în SEO?
Noindex este important în SEO tehnic deoarece stabilește ce pagini și resurse nu trebuie afișate în rezultatele organice. Poate fi folosit pentru URL-uri care trebuie să rămână accesibile utilizatorilor sau crawlerelor, dar care nu sunt destinate căutării publice.
O implementare greșită poate elimina din Google Search pagini importante, inclusiv pagini care primesc linkuri externe. Situația inversă este la fel de relevantă: dacă o pagină este blocată prin robots.txt, Googlebot nu poate citi noindex, iar URL-ul poate continua să apară în rezultate. De aceea, controlul accesării cu crawlere și controlul indexării trebuie tratate separat.
Google include AI Overviews și AI Mode între formele rezultatelor sale. O pagină exclusă prin noindex nu este afișată în rezultatele Google Search. Alte motoare de căutare pot interpreta regula diferit, iar aceasta este urmată numai de crawlerele compatibile și cooperative.
Noindex nu reprezintă o metodă garantată de blocare a accesului la conținut. Nu împiedică utilizatorii, crawlerele necooperative sau alți actori să deschidă URL-ul. Rolul său este controlul indexării în sistemele care acceptă regula.
Exemplu
Un magazin online din România are o pagină de confirmare afișată după trimiterea unei cereri. Pagina trebuie să rămână accesibilă, dar nu este utilă ca rezultat în Google Search.
În secțiunea <head> a paginii se adaugă:
<head>
<title>Cerere înregistrată</title>
<meta name="robots" content="noindex">
</head>
URL-ul nu trebuie blocat în robots.txt. Astfel, Googlebot îl poate accesa și poate detecta regula. Dacă pagina era deja indexată, eliminarea are loc după ce Google o accesează din nou și procesează noindex.
Cum verifici?
- Deschide codul HTML primit de browser și caută
<meta name="robots" content="noindex">sau o regulă echivalentă adresată Googlebot. - Verifică răspunsul HTTP al URL-ului și caută antetul
X-Robots-Tag: noindex. - Controlează fișierul
robots.txtpentru a confirma că URL-ul nu este blocat pentru crawlerul care trebuie să citească regula. - Folosește URL Inspection din Google Search Console pentru a vedea HTML-ul primit de Googlebot și pentru a verifica implementarea.
- Consultă raportul Page Indexing din Google Search Console pentru URL-urile de la care Googlebot a extras regula noindex.
- După o modificare, solicită o nouă accesare a paginii prin URL Inspection, dacă este necesar.
Ce trebuie să faci?
- Aplică noindex numai URL-urilor care nu trebuie afișate în rezultatele căutării.
- Folosește eticheta meta robots pentru pagini HTML și X-Robots-Tag pentru resurse non-HTML.
- Păstrează URL-ul accesibil crawlerului; nu combina accidental noindex cu o blocare în
robots.txt. - Verifică atât codul HTML, cât și anteturile HTTP, deoarece regula poate fi transmisă prin oricare dintre metode.
- Monitorizează Google Search Console după implementare pentru a confirma că Googlebot a detectat regula.
- Elimină noindex dacă a fost aplicat din greșeală unei pagini care trebuie să apară în căutare.
Greșeli frecvente
- Adăugarea regulii noindex în `robots.txt`, metodă care nu este acceptată de Google.
- Blocarea URL-ului prin `robots.txt`, astfel încât Googlebot să nu poată vedea regula noindex.
- Aplicarea accidentală a noindex pe pagini importante care trebuie să apară în rezultatele organice.
- Presupunerea că pagina dispare imediat, fără ca motorul de căutare să o acceseze din nou.
- Folosirea noindex ca metodă de securizare sau de restricționare a accesului la conținut.
Perspectiva SEO 365
Verificăm mai întâi dacă URL-ul trebuie într-adevăr exclus din rezultate, apoi controlăm accesibilitatea pentru crawler. Validăm regula în răspunsul primit de Googlebot, nu doar în setările CMS. Evităm combinarea noindex cu o blocare în robots.txt, deoarece crawlerul nu ar mai putea citi regula.