Fiecare proprietar de site-uri știe că, de-a lungul timpului, o mulțime de pagini inutile se acumulează pe resursele sale, unii chiar dau 404, unii nu înțeleg ce. Nu avem nevoie de toate astea, nu avem nevoie nici de Google. Dar gunoiul continuă să atârne și, cel mai adesea, se blochează în rezultatele suplimentare ale problemei, în care nimeni altul decât proprietarii de site-uri (folosind operatorul site-ului să se uite la) nu arata.
Care sunt opțiunile?
1) Ștergeți paginile de pe site. Utilizând robots.txt.
Permiteți-mi să vă reamintesc că robots.txt din Google gestionează doar scanarea paginilor, adică pornirea sau oprirea accesului la anumite locuri de pe site. Ceea ce este deja în indexul Google este supus numai metatagului robotului cu parametrul noindex. Și în robots.txt, dacă ceva este interzis, atunci ceea ce este deja cunoscut de Google, cel mai simplu nu va fi scanat, va rămâne în index fără o actualizare. În timp, va primi un stub în loc de un fragment și va lăsa pe "modalități de rezervă" ale unui index.
De fapt, fără a filosofa fals, ștergem paginile de gunoi de pe site. Paginile sunt eliminate și codul este 410 (sau 404). Starea "eliminat" sau "absent".
În robots.txt, trebuie să deschideți accesul la aceste pagini de la distanță. altfel Googlebot nu poate citi codul 410 sau 404.
Ce este important să știți. Pentru a șterge paginile inutile, codul 404 și accesul la acesta googlobot. Totul! Google nu penalizează site-urile pentru un număr mare de pagini 404 sau 410. Aceste pagini vor părăsi în cele din urmă indexul. Dacă nu, accesați Google. emite un bug.
2) Lăsați paginile de pe site, utilizați meta-tag-ul roboților cu parametrul noindex. Această etichetă meta controlează indexarea. Paginile marcate de ele vor fi șterse din index. În robots.txt, trebuie să li se permită accesul.
3) Lăsați paginile de pe site, utilizați atributul rel = "canonical". Această metodă este potrivită doar pentru a scăpa de momente absolut identice. În caz contrar, Google nu va lua în considerare această opțiune. Ca rezultat, cu un scenariu bun, indicele rămâne pagina canonic, iar duplicatele sale (cel puțin una, chiar și o mie) vor dispărea.
Consultați URL-ul canonic.
Fii atent! Google acceptă canonizarea inter-domenii între linkuri, Yandex - nu!
4) Lăsați paginile, configurați redirecționarea 301 la versiunea corectă. Googlebot a văzut redirecționarea, totul ar trebui să fie deschis în robots.txt!
Trimiteți-le prietenilor: