Prestaňte robiť AI optimalizácie, ktoré nefungujú

Posledné mesiace boli mätúce. Čo by sme mali robiť s našimi webmi, aby sme ich pripravili na AI? Čomu sa vyhnúť? Nájsť správne odpovede je ťažšie než kedykoľvek predtým, pretože viaceré autority hovoria presne opačné veci.

Aby sme zistili, čo skutočne zlepšuje viditeľnosť v AI vyhľadávaní a nástrojoch, musíme ísť hlbšie. Musíme pochopiť, ako fungujú AI modely, čo odhaľujú serverové logy o správaní crawlerov a sledovať AI viditeľnosť. Poslednú tému som rozobral v predchádzajúcom blogu. Je to zložité, pretože sledovanie nie je jednoduché ani lacné a nie je vhodné pre každý web.

Poďme sa teda pozrieť na niektoré populárne „optimalizácie", ktoré škodia viac, než pomáhajú.

Zobrazovanie Markdownu namiesto štandardných stránok

Pravdepodobne najkontroverznejší návrh, ktorý som v poslednej dobe počul, je zobrazovanie Markdownu AI crawlerom namiesto tradičných webových stránok. Na prvý pohľad to znie zaujímavo. Problém je však hlbší, než si väčšina ľudí uvedomuje.

Crawlery neextrahujú len text. Vyhodnocujú webové stránky ako celok. Takto rozpoznávajú autoritu a zachytávajú signály, ktoré čistý Markdown jednoducho nedokáže poskytnúť.

Jedným z najväčších rizík je cloaking. Keď zobrazujete rôzny obsah na základe user agenta, Google môže váš web úplne odstrániť z tradičného vyhľadávania. To je riziko, ktoré by nikto nemal brať na ľahkú váhu.

Na druhej strane, Markdown dokáže ušetriť značné množstvo tokenov. Redukcia je často až 80 %. Aj Cloudflare nedávno predstavil Markdown for Agents. Zatiaľ však neexistuje širšia podpora od ostatných firiem.

Momentálne riziká prevažujú nad prínosmi.

llms.txt a llms-full.txt

Tieto dva súbory nie sú oficiálnym štandardom. Na základe môjho monitorovania serverových logov z viacerých webov naprieč rôznymi jazykmi, veľkosťami a odvetviami vám môžem povedať, že žiadny z aktuálnych veľkých hráčov tieto súbory nepoužíva.

Situácia s llms.txt je jednoduchá. Môžete ho vytvoriť za pár minút a nechať na serveri, kým ho AI crawlery nezačnú používať. Je to príjemný doplnok v štýle „nastav a zabudni" (ideálne by ste ho mali aktualizovať s aktualizáciami obsahu).

Situácia s llms-full.txt je oveľa horšia.

Pre malé weby s desiatkou stránok je vytvorenie a aktualizácia tohto súboru jednoduchá úloha. AI crawlery by ho potenciálne mohli využiť, pretože by zostal pod 1M tokenov. Na väčších weboch sa to však stáva nemožným. Vygenerovanie takého množstva obsahu naraz by bolo pre servery extrémne náročné.

Je tu aj druhý problém. Limity vstupných tokenov súčasných AI modelov. Pre väčšinu väčších webov by tento súbor výrazne presahoval 1M tokenov. V mnohých prípadoch by mohol dosiahnuť viac ako 100M tokenov alebo dokonca 1B tokenov. To ho robí úplne nepoužiteľným. Nedokázali by ste ho ani otvoriť v aktuálnych nástrojoch a prehliadačoch.

Client-side Schema je pre AI neviditeľná

Všimol som si viacero služieb, ktoré používajú AI na generovanie Schema implementácie pre váš web alebo e-shop. Stačí pridať jeden kúsok JavaScriptu z domény danej služby.

Hoci tento prístup môže pomôcť v tradičnom vyhľadávaní, pretože Google dokáže renderovať JavaScript, Google stále neodporúča implementovať Schema týmto spôsobom.

Pre AI je to ešte horšie. Väčšina AI crawlerov stále vôbec nerenderuje JavaScript. To znamená, že tieto JSON-LD schémy neuvidia. Platíte za drahú službu, ktorá je neviditeľná pre systémy, pre ktoré sa snažíte optimalizovať.

Čo by ste mali skutočne robiť?

Takže čo funguje a čo nie? Najjednoduchšia rada, ktorú môžem dať všetkým vlastníkom webov, je: dodržiavajte SEO štandardy. Technické SEO je pre AI crawlery ešte dôležitejšie než pre tradičné vyhľadávanie.

Na LinkedIn, X a ďalších sociálnych platformách môžete vidieť milióny samozvaných „AI expertov", ktorí nemajú potuchy, ako veci skutočne fungujú. Takže ako som povedal minule, nepodliehajte FOMO. Sústreďte sa na základy. Tie sú stále najdôležitejšie.