Souhrn
AI prohlížeče ChatGPT Atlas od OpenAI a Comet od Perplexity dokážou obcházet placené zdi (paywalls) některých vydavatelů a získávat přístup k obsahu určenému pouze pro platící předplatitele. Podle zprávy Columbia Journalism Review se tyto nástroje pro webové servery tváří jako běžní uživatelé, což vydavatelům znemožňuje je efektivně blokovat.
Klíčové body
- Oba AI prohlížeče dokázaly získat 9000slov dlouhý placený článek z MIT Technology Review, zatímco běžný ChatGPT byl zablokován
- Atlas a Comet se pro webové servery jeví jako běžní lidští uživatelé, nikoliv jako AI roboti
- Vydavatelé používají Robots Exclusion Protocol k blokování AI crawlerů, ale agentic AI nástroje tento mechanismus obcházejí
- Některé weby používají client-side paywally, které AI roboti dokážou číst navzdory skrytí textu pro běžné návštěvníky
- Atlas se vyhýbá čtení obsahu od vydavatelů, kteří právě žalují OpenAI
Podrobnosti
Columbia Journalism Review provedla test, při kterém požádala ChatGPT Atlas a Perplexity Comet o získání placeného článku z MIT Technology Review. Oba AI prohlížeče byly úspěšné, zatímco standardní ChatGPT nástroj selhal, protože web zablokoval OpenAI web crawler pomocí standardních ochranných mechanismů.
Problém spočívá v technické povaze těchto nových AI nástrojů. Zatímco tradiční web crawlery a AI roboti se identifikují specifickým způsobem, který umožňuje vydavatelům je blokovat pomocí Robots Exclusion Protocol, agentic AI prohlížeče jako Atlas a Comet fungují odlišně. Pro webový server vypadají jako běžný lidský provoz, což znemožňuje jejich detekci a následné omezení přístupu.
Situaci komplikuje i fakt, že některé publikace používají takzvané client-side paywally. Tyto systémy sice skrývají text článku před návštěvníky v prohlížeči, ale plný obsah je stále přítomen v HTML kódu stránky. AI roboti tak mohou tento obsah číst bez omezení, i když běžný uživatel vidí pouze výzvu k předplatnému.
Zajímavým zjištěním je, že Atlas se aktivně vyhýbá čtení obsahu od vydavatelů, kteří v současnosti vedou soudní spory s OpenAI. Když byl požádán o shrnutí článku z PCMag (vlastněného společností Ziff Davis, která vlastní i Mashable), Atlas místo toho vytvořil kompozitní shrnutí založené na příspěvcích z platformy X, syndikovaných článcích a dalších externích zdrojích.
Proč je to důležité
Tato situace představuje zásadní problém pro mediální průmysl, který již čelí výzvám spojeným s monetizací online obsahu. Paywally jsou pro mnoho vydavatelů klíčovým zdrojem příjmů, a pokud je AI nástroje dokážou systematicky obcházet, podkopává to celý obchodní model kvalitní žurnalistiky.
Jde o novou dimenzi dlouhodobého sporu mezi AI společnostmi a vydavateli ohledně používání chráněného obsahu pro trénování a provoz AI systémů. Zatímco dříve šlo především o scraping dat pro trénování modelů, nyní AI nástroje aktivně zpřístupňují placený obsah koncovým uživatelům, což přímo konkuruje předplatitelským modelům vydavatelů.
Pro technologický průmysl to znamená nutnost hledat nová řešení. Vydavatelé budou muset vyvinout sofistikovanější metody ochrany svého obsahu, které dokážou rozlišit mezi legitimními uživateli a AI agenty. Zároveň to zvyšuje tlak na AI společnosti, aby respektovaly práva vydavatelů a hledaly způsoby fair kompenzace za používání jejich obsahu.
Zdroj: 📰 Mashable