
Cloudflare mení internet: koniec bezplatného využívania webov zo strany AI
V digitálnom svete sa odohrala udalosť, ktorá sa dá prirovnať k vyhláseniu vojny v mene tvorcov obsahu. Spoločnosť Cloudflare, gigant v oblasti internetovej infraštruktúry, spravila zásadné rozhodnutie, ktoré môže navždy zmeniť pravidlá hry pre umelú inteligenciu. Nejde len o technickú aktualizáciu, ale o historický míľnik, ktorý predstavuje prvý systematický a rozsiahly odpor proti nekompenzovanému zberu dát zo strany AI spoločností. Keďže Cloudflare spravuje prevádzku pre približne 20 % celého webu, jeho kroky majú okamžitý a masívny dopad.
Toto nie je len jedna webstránka blokujúca jedného bota; je to fundamentálna zmena v samotnej architektúre internetu. Kým sa v súdnych sieňach vedú zdĺhavé debaty o autorských právach a princípe „fair use“, Cloudflare využil svoju pozíciu a zaviedol praktické, vynútiteľné riešenie, ktoré obchádza právnu nejednoznačnosť a mení mocenskú rovnováhu v prospech tvorcov. Problém, na ktorý Cloudflare reaguje, je pre majiteľov webových stránok existenčný.
Webové prehľadávače (crawlery) umelej inteligencie, ako sú GPTBot od OpenAI alebo ClaudeBot od Anthropicu, sú oveľa agresívnejšie ako tradičné prehľadávače vyhľadávačov ako GoogleBot. Neustále navštevujú tie isté stránky a dokážu server zaťažiť stovkami požiadaviek za sekundu, čo vedie k spomaleniu webov a zhoršeniu používateľského zážitku pre skutočných ľudských návštevníkov. Ešte závažnejší je však narušený model výmeny hodnôt.
Kým Google za indexovanie obsahu posiela na stránky späť návštevnosť, ktorú môžu tvorcovia monetizovať, veľké jazykové modely (LLM) informácie iba absorbujú a odpovede poskytujú priamo vo svojom rozhraní. Tým oberajú tvorcov o návštevnosť, príjmy z reklamy a v konečnom dôsledku aj o uznanie. Tento parazitický vzťah narušil nepísanú spoločenskú zmluvu webu, kde symbióza medzi vyhľadávačmi a tvorcami umožňovala rast obom stranám. Vzostup generatívnej AI túto zmluvu zrušil a nahradil ju modelom, ktorý hrozil zničením motivácie pre tvorbu originálneho obsahu.
Riešenie, s ktorým Cloudflare prišiel, je dvojaké a mimoriadne účinné. Od 1. júla 2025 všetky nové domény využívajúce služby Cloudflare automaticky blokujú známe AI prehľadávače. Majitelia stránok sa teraz musia aktívne rozhodnúť (opt-in), či takýmto botom prístup povolia, čo je presný opak predchádzajúceho modelu, kde museli blokovanie manuálne zapínať (opt-out). Už pred touto zmenou si možnosť blokovania zvolilo viac ako milión zákazníkov, čo svedčí o rozsahu problému.
Okrem toho dostali majitelia stránok detailnejšiu kontrolu, ktorá im umožňuje pre každý konkrétny prehľadávač zvoliť jednu z troch možností: povoliť prístup zadarmo, úplne ho zablokovať, alebo si za prístup účtovať poplatok. Práve táto tretia možnosť, nazvaná „Pay Per Crawl“ (Plať za prehliadanie), je najinovatívnejšou časťou celého riešenia. Cloudflare na jej implementáciu oživil dlho zabudnutý a prakticky nikdy nepoužívaný HTTP status kód 402 „Payment Required“ (Vyžaduje sa platba).
Keď sa AI prehľadávač pokúsi získať prístup k platenému obsahu, server mu vráti odpoveď s kódom 402 a informáciami o cene. AI spoločnosť sa potom môže rozhodnúť, či za prístup zaplatí. Týmto technicky elegantným krokom Cloudflare vzkriesil 25 rokov starú myšlienku webových mikroplatieb a vytvoril technický základ pre úplne nový trh s dátami. Dôsledky tohto kroku sú obrovské. Pre gigantov v oblasti umelej inteligencie je to „zlá správa“. Ich hlavný zdroj – obrovský oceán bezplatných tréningových dát – sa začína deliť a zatvárať za platobné brány.
Budú musieť prispôsobiť svoje obchodné modely, buď platením za dáta, alebo hľadaním alternatívnych zdrojov. Na druhej strane, tvorcovia obsahu a mediálne domy tento krok vítajú s nadšením. Podporu vyjadrila široká koalícia spoločností vrátane The Associated Press, Condé Nast, Universal Music Group a Ziff Davis, čo potvrdzuje, že ide o celoodvetvový problém. Tento krok môže naštartovať novú éru transparentnosti, kde AI spoločnosti budú musieť otvorene deklarovať svoje zdroje a vstupovať do férových obchodných vzťahov.
V optimistickom scenári to povedie k udržateľnejšiemu internetu, kde sú tvorcovia spravodlivo odmeňovaní a majú motiváciu pokračovať v produkcii kvalitného obsahu, na ktorom sú AI modely závislé. V pesimistickom scenári by to mohlo viesť k fragmentácii webu a vzniku neprehľadného trhu. Cloudflare však svojím krokom nielenže vystrelil štartovací výstrel, ale zároveň ponúkol infraštruktúru pre vytvorenie nového, spravodlivejšieho ekosystému.
Zdroj: zdnet.com.
Zdroj Foto: depositphotos.com.