Chyba 499 vám potichu ničí viditeľnosť v AI

Vždy, keď to ChatGPT na niektorej z vašich stránok vzdá, nechá po sebe stopu v server logoch. Skoro nikto ju však proaktívne nehľadá.

Pritom je to možno ten najlepší signál, ktorý máte, či AI nástroje dokážu váš obsah vôbec prečítať.

Čo vlastne chyba 499 je

Keď si niekto vyžiada stránku, váš server začne skladať odpoveď. Ak návštevník ukončí spojenie skôr, než to server stihne dokončiť, nginx zaloguje túto ukončenú požiadavku ako 499 - „Client Closed Request“.

Nie je to štandardný HTTP kód. Oficiálna HTTP špecifikácia tento prípad vôbec nerieši.

Nginx si vymyslel vlastný kód, aby nám pomohol.

A to je dôležité z dvoch dôvodov.

Po prvé, Apache chyby 499 v predvolenom nastavení neloguje. Ak používate Apache, tento problém je pre vás neviditeľný. Bot to aj tak vzdá. Vy to len nikdy neuvidíte.

Po druhé, čokoľvek beží za Cloudflare, Fastly alebo akýmkoľvek CDN postaveným na nginx, loguje chyby 499 práve teraz. Či ste sa na ne niekedy pozreli, alebo nie.

Roky boli chyby 499 len okrajový signál. Pár za deň. Zvyčajne netrpezliví ľudia na nestabilnom mobilnom pripojení, ktorí opustia pomalú stránku.

Stálo za to si to skontrolovať, lebo to znamenalo, že váš web je asi pomalší, než by mal byť. Ale žiadna kríza.

To sa zmenilo, keď AI nástroje začali načítavať stránky v reálnom čase.

Prečo AI nástroje vytvárajú toľko chýb 499

Keď sa ChatGPT na niečo opýtate, ide si najskôr prečítať pár zdrojov, než vám odpovie. Vy čakáte. OpenAI vie, že čakáte.

Takže bot, ktorý to načítavanie robí - ChatGPT-User - má brutálne krátke okno na to.

Ak vaša stránka nezačne odpovedať dostatočne rýchlo, vykašle sa na to. Presunie sa na ďalší zdroj zo zoznamu.

To vykašlanie sa na to sa vám v logoch zobrazí ako 499.

Na väčšine webov, s ktorými som pracoval, ChatGPT-User dominuje chybám 499 s veľkým náskokom.

Boty Claude a Perplexity spúšťané používateľom sa správajú rovnako. Len v menších objemoch.

Prečo je to horšie než bežná pomalá stránka

Pomalá stránka, ktorá sa načíta za 4 sekundy, je pre ľudí otravná. Ale zvyčajne počkajú. Google ju prejde crawlerom, vyrenderuje, zaindexuje. Môžete dopadnúť horšie, ale nezmiznete.

Chyba 499 od AI crawlera je iná v dvoch ohľadoch.

Bot takmer určite nedostal nič použiteľné. Timeout zapne skôr, než server vôbec začne posielať odpoveď. Žiadne HTML, žiadne hlavičky, nič, s čím by AI mohla pracovať.

A neopakuje to. Raz zmeškáte okno a daná stránka je z odpovede vylúčená. Citáciu namiesto nej dostane ďalšia stránka v zozname.

Žiadna AI firma nikdy nezverejnila svoju presnú hranicu timeoutu. Všeobecné odporúčanie je držať time to first byte pod 800 milisekúnd. Crawlery zvládnu o niečo viac, ale nikto presne nevie, koľko.

Rýchlejšie je vždy lepšie.

Ako nájsť chyby 499 vo vlastných logoch

Najskôr potrebujete logy. Ak ste na manažovanom hostingu, zvyčajne sa dajú stiahnuť z dashboardu pod položkou „Logs“, „Analytics“ alebo „Tools“. Ak prevádzkujete vlastný server, nginx logy bývajú v /var/log/nginx/access.log.

Ak vám z toho nič neznie povedome, jednoducho požiadajte svojho vývojára o „posledných 30 dní nginx access logov vyfiltrovaných na status kód 499 a user-agenty AI botov“. Táto formulácia zvyčajne zaberie.

URL adresy, ktoré sa vo výsledku objavujú najčastejšie, sú vaše pomalé stránky. Práve tie teraz spôsobujú chyby 499.

Čo s tým reálne robiť

Oprava nie je zložitá. Ale ani zadarmo.

Pomalé stránky z toho zoznamu musia začať odpovedať rýchlejšie. TTFB pod jednu sekundu. Ideálne pod 500 milisekúnd.

Riešenia nie sú nič nové: full-page caching, CDN s agresívnym edge cachingom, rýchlejšie databázové dotazy, menej pluginov, ktoré zdržujú robotu pri každej jednej požiadavke.

Bežná optimalizácia výkonu. Len aplikovaná s novou naliehavosťou.

Jednej veci sa aktívne vyhnite. Existuje nastavenie nginx s názvom proxy_ignore_client_abort. Keď ho zapnete, prestane chyby 499 logovať úplne. Niektoré návody na „opravu chýb 499“ ho odporúčajú ako riešenie.

Nerobte to. Nič to neopraví. Bot to aj tak vzdá. Citáciu aj tak stratíte. Len už neuvidíte dôkaz.

Základy opäť vyhrávajú

Rovnaký záver, znova. Žiadny nový formát súboru. Žiadny zázračný meta tag. Len rýchly server, rozumná CDN a HTML, ktoré existuje ešte predtým, než sa spustí JavaScript.

Nový je trest. Google bol trpezlivý vyše desaťročia. AI crawlery nie sú.

Jeden pokus. Jedna šanca. Žiadne opakovanie.

Chyba 499 si teda zaslúži trvalé miesto na vašom monitorovacom dashboarde. Je to najbližšie, čo dostanete k tomu, aby vám AI crawlery vlastnými slovami povedali: „skúsili sme prečítať vašu stránku a vzdali sme to.“

To nie je šum, ktorý treba odfiltrovať. To je zoznam stránok, ktoré už teraz prichádzajú o citácie, o ktorých ste ani nevedeli.