HTML galvenē ielikts robots meta tags var ierobežot lapas rādīšanu meklēšanā. Taču Google noklusējuma uzvedība jau ir atļaut indeksēšanu un sekošanu saitēm; “index, follow” nav slepena SEO priekšrocība.
Kas patiešām var izslēgt lapu
Noindex meta tags vai X-Robots-Tag atbildes galvene jāmeklē tur, kur tie nav paredzēti. Bieža kļūda ir testa vides iestatījuma pārnešana uz publisku lapu. Atsevišķi pārbaudi, vai robots.txt neaptur pārmeklēšanu: ja robots lapu nevar ielādēt, tas nevar izlasīt lapā esošu noindex.
Nejauc trīs dažādas lietas
Robots.txt regulē pārmeklēšanu, noindex regulē indeksēšanu, bet canonical norāda vēlamo versiju starp līdzīgām adresēm. Šie signāli nav savstarpēji aizvietojami. Piemēram, bloķēt URL ar robots.txt tikai tāpēc, lai Google izlasītu tā noindex, ir loģiska pretruna.
Praktisks audits
Izvēlies vienu indeksējamu un vienu neindeksējamu lapu. Pārbaudi HTTP atbildi, HTML meta tagus, robots.txt un Search Console URL Inspection. Tad salīdzini faktisko Google izvēlēto stāvokli ar savu nodomu. Labo veidni vai servera konfigurāciju, ja kļūda atkārtojas.
Ko pārbaudīt praksē
Īpaši piesardzīgi pārbaudi lapas pēc dizaina maiņas. Satura pārvaldības sistēmās izstrādes vides slēdzis var atstāt noindex galvenajā veidnē. Citreiz vecs X-Robots-Tag nāk no servera un HTML izskatās pareizs. Tāpēc pārbaudē vajadzīga gan lapas atbilde, gan atveidotais HTML, gan meklētāja redzētais. Viena trūkstoša index, follow rindiņa nav kļūda.
Avoti un tālāka lasīšana
Redakcijas piezīme: Pārstrādāts no strolis.info arhīva 2024. gada ieraksta “Robotu metatags ar "index" un "follow" ir bezjēdzīgs Google-i.”. Sākotnējais materiāls izmantots kā tēmas sākumpunkts; šis ir jauns skaidrojums ar pārbaudītiem avotiem, nevis pārpublicējums.