Vaša mapa stránok robí pravý opak toho, čo si myslíte

Cez svoju XML mapu stránok pošlete Googlu 48-tisíc URL adries. Zaindexuje sa ich 11-tisíc. A vy sa stále pýtate, prečo Google nechce prehľadávať viac.

Máte to naopak. Google toho prehľadal až-až. Len sa nezhodol s vašou definíciou toho, čo „stojí za indexovanie", a to pri 77 % toho, čo ste poslali.

Vzorec je takmer vždy rovnaký. Mapy stránok napchaté stránkami, ktoré by pri obsahovom audite nikto neobhájil, odoslané na autopilota, ktoré Googlu signalizujú, že celková kvalita vášho webu je slabá.

Svoju mapu stránok pravdepodobne beriete ako zoznam. Kopu URL adries, o ktorých by Google mal vedieť. Pošlite všetko a nech si to Google pretriedi.

Lenže mapa stránok nie je toto.

Každou URL adresou vo svojej mape stránok za niečo ručíte

Keď Googlu pošlete URL adresu, hovoríte mu tým štyri veci. Táto URL adresa existuje. Je to kanonická verzia. Dá sa indexovať. Stojí za to zobraziť ju vo výsledkoch vyhľadávania.

Nepýtate sa. Ručíte za ne.

Pošlite Googlu 48-tisíc URL adries a zaručili ste sa 48-tisíc ráz. Ak Google 37-tisíc z nich odmietne, odovzdali ste mu písomný záznam stránok, za ktoré ste sa postavili svojím menom – a ktoré neprešli. Každá ďalšia URL adresa, ktorú zverejníte, štartuje s týmto handicapom. Google sa už naučil, že vášmu úsudku sa nedá veriť.

Práve tento posun väčšina SEO špecialistov prehliada. Vaša mapa stránok nie je žiadosť, aby Google odviedol viac práce. Je to starostlivo vybraný zoznam stránok, podľa ktorých ste ochotní nechať sa posudzovať.

Keď to raz prijmete, vaše východiskové nastavenie sa preklopí zo „zahrňme všetko, čo sa dá" na „zahrňme len to, čo by sme obhájili".

Čo vám do nej váš CMS potichu pridá

Väčšina máp stránok nikdy neprešla kontrolou. Jednoducho sa vygenerovali.

Plugin prešiel vašu databázu, našiel každú URL adresu, o ktorej systém vedel, a všetko vysypal do /sitemap.xml. Výstup nikto neskontroloval.

A tak vám v mape stránok skončia tagové stránky, ktoré nikto nečíta. Autorské archívy redaktorov, ktorí odišli pred rokmi. Stránkované archívy typu /blog/page/47. Facetové URL adresy, ktoré kombinujú štyri filtre, čo nikto nehľadá. Výsledky interného vyhľadávania. Parametrické URL adresy, ktoré duplikujú kanonický obsah. Vypredané produkty. Prázdne kategórie s dvoma produktmi.

Žiadna z týchto stránok si nezaslúži miesto vo výsledkoch vyhľadávania. To, že na vašom webe existujú, ešte neznamená, že by ich mal Google indexovať.

Vaším prvým krokom pri každom audite mapy stránok je ich odstránenie. Nie presmerovanie, nie pridanie direktívy noindex. Len ich odstrániť z mapy stránok. Ak majú nejakú navigačnú hodnotu, nechajte ich dostupné na prehľadávanie cez interné odkazy. Inak ich nechajte zaniknúť.

Základy, na ktorých väčšina máp stránok potichu zlyháva

Väčšina auditov, ktoré robím, zlyhá ešte skôr, než sa vôbec dostaneme ku kvalite obsahu. Pokazené sú už základy.

Každá URL adresa musí vracať 200. Nie 301, nie 302, nie 404, nie 5xx. Presmerovaná URL adresa hovorí Googlu, že vaša mapa stránok je zastaraná. Stránka, za ktorú ručíte, na danej adrese už vôbec nie je. Ak do mapy stránok uvediete /old-product/ a tá sa presmeruje na /new-product/, vytvorili ste rozpor. Uveďte rovno finálnu URL adresu.

Každá URL adresa musí byť indexovateľná. Žiadna značka meta noindex, žiadna hlavička x-robots s hodnotou noindex. Toto je najčastejšia chyba, na akú narážam. Vaša stránka má cez nejaký plugin nastavený noindex, generátor mapy stránok to neskontroluje a URL adresa sa do nej aj tak dostane. Hovoríte Googlu naraz dve protichodné veci. Google sa riadi direktívou na stránke a prestane vašej mape stránok veriť.

Každá URL adresa musí byť svojou vlastnou kanonickou adresou. Ak je v mape stránok /product?color=red a kanonická URL adresa stránky ukazuje na /product, máte konflikt. Často sa zaindexuje tá nesprávna URL adresa. Alebo žiadna.

Každá URL adresa musí byť povolená v súbore robots.txt. Uvádzať v mape stránok URL adresy, ktoré ste zablokovali pred prehľadávaním, je rozpor, na ktorý dokumentácia Google explicitne upozorňuje. Stále na to narážam zhruba pri každom treťom audite.

Lastmod musí byť presný, alebo prázdny. Tento signál je binárny. Google mu buď verí, alebo nie. Ak váš CMS pri každom regenerovaní mapy stránok opečiatkuje každú URL adresu dnešným dátumom, rozbili ste lastmod pre celú svoju doménu. Nepresný lastmod je horší než žiadny.

Jedna mapa stránok môže mať najviac 50-tisíc URL adries alebo 50 MB v nekomprimovanej podobe. Osobne by som išiel oveľa nižšie. Keď sa weby blížia k limitu, neustále vidím problémy so spracovaním. Search Console súbory načíta len čiastočne alebo ich úplne preskočí. Rozdeľte obsah do indexovej mapy stránok a držte každý súbor poriadne pod stropom.

Nič z toho nie je nové. Všetko je to v dokumentácii. A predsa nájdem aspoň jedno porušenie prakticky v každej mape stránok, ktorú otvorím.

Menej odoslaného, viac zaindexovaného

Vzťah medzi veľkosťou mapy stránok a indexovaním je často nepriamy.

Pracoval som s webmi, ktoré svoju mapu stránok skrátili o 80 % a indexovanie im stúplo. Stránky, ktoré to prežijú, prestanú súperiť o pozornosť Googlu s tisíckami slabých.

Ťažko sa to prijíma. Keď je indexovanie zlé, váš inštinkt tlačí na viac. Viac URL adries, viac máp stránok. Správny ťah je takmer vždy opačný.

Mapa stránok s 15-tisíc URL adries, ktorá sa indexuje na 96 %, je silnejšia než tá vaša so 48-tisíc URL adries indexujúca na 23 %. Vždy. Tá prvá je odporúčanie, ktorému Google verí. Tá druhá je šum, ktorý sa Google naučil ignorovať.

Ako to naozaj opraviť

Začnite tým, že si mapu stránok rozsegmentujete. Kategórie do jednej, produkty do druhej, články do tretej. Prehľadávaniu to nepomôže, no len čo začnete merať, zviditeľní vám to problém s indexovaním podľa jednotlivých šablón.

Otvorte Google Search Console. Prehľad máp stránok ukazuje, čo Google z každej mapy stránok spracoval. Prehľad Indexovanie stránok, vyfiltrovaný podľa mapy stránok, ukazuje, koľko URL adries z každej sa naozaj dostalo do indexu. Porovnajte oba. Keď sa vaše kategórie indexujú na 95 % a produkty na 35 %, presne viete, ktorú šablónu opraviť.

Na priebežné sledovanie mám vlastný nástroj VitalSentinel, ktorý monitoruje indexovanie konkrétne pre URL adresy z vašej mapy stránok, takže odchýlku na úrovni šablóny zachytíte skôr, než sa zhorší. Fungujú aj iné monitorovacie nástroje.

Prejdite svoju mapu stránok cez Screaming Frog v režime zoznamu (list mode). Označte každú URL adresu, ktorá nevracia 200, ktorá má noindex, ktorej kanonická URL adresa ukazuje inam, ktorá je blokovaná v súbore robots.txt. Všetky ich zmažte.

Potom to ťažšie rozhodnutie. Pozrite sa na šablóny so slabým indexovaním, ktoré navyše neprinášajú žiadne zobrazenia ani návštevnosť. To sú vaši kandidáti na odstránenie. Nepresmerovávajte, nedávajte noindex. Len za ne prestaňte ručiť.

Znova ten istý vzorec

Rovnaký záver ako všade inde v technickom SEO. Žiadny nový formát. Žiadna zázračná značka. Len URL adresy, ktoré spĺňajú základy, a obsah, ktorý stojí za obhajobu.

Google bol so zlými mapami stránok trpezlivý vyše desať rokov. Weby sa naučili, že môžu Googlu odoslať všetko a nechať ho, nech si to pretriedi. Tie časy sa končia. Celoplošná kvalita webu je dnes súčasťou základného hodnotenia (core ranking). Každá URL adresa, ktorú odošlete, do tohto výpočtu vstupuje.

Vaša mapa stránok nie je zoznam stránok, ktoré existujú. Je to zoznam stránok, podľa ktorých ste ochotní nechať sa posudzovať.

Odošlite zoznam, ktorý by ste obhájili.