Cloudflare začne automaticky blokovat AI roboty, kteří stahují obsah webů bez svolení

Firma Cloudflare zavádí blokaci AI crawlerů na nových doménách. Chce tak ochránit tvůrce obsahu před neautorizovaným sběrem dat.

Cloudflare, jedna z největších firem poskytujících síťové služby a CDN, oznámila, že bude automaticky blokovat přístup AI robotům (tzv. crawlerům) ke všem nově zaregistrovaným webům, pokud to jejich majitelé výslovně nepovolí. Společnost zároveň zavádí možnost zpoplatnit přístup k obsahu pomocí modelu „pay per crawl“.

Cloudflare zajišťuje distribuci webového obsahu a podle svých dat z roku 2023 přenáší asi 16 % celkového světového internetového provozu. Nové opatření tedy může mít výrazný dopad na společnosti jako OpenAI nebo Google, které trénují své modely pomocí dat stažených z webů.

„AI roboti dosud stahovali obsah bez omezení. Naším cílem je vrátit moc zpět tvůrcům obsahu,“ uvedl CEO firmy Matthew Prince. Podle něj jde o ochranu svobodného a udržitelného internetu, který bude výhodný pro všechny zúčastněné strany.

AI crawlery jsou automatizované nástroje, které sbírají velké objemy textu, obrázků a dalšího obsahu z veřejných webů. Tím ale odvádějí návštěvnost od původních zdrojů a snižují příjmy z reklamy. Cloudflare tvrdí, že AI tím narušují původní model fungování internetu, kde návštěvníci přicházeli přímo na weby tvůrců.

Společnost OpenAI reagovala s tím, že její nástroje respektují nastavení souboru robots.txt a odmítla se zúčastnit testování nové funkce Cloudflare. Podle ní Cloudflare zbytečně přidává do systému další mezikrok. Právníci však upozorňují, že tento krok může zpomalit trénování AI modelů a v dlouhodobém horizontu ovlivnit jejich kvalitu.

Chcete internet bez výpadků?

Pokud se často potýkáte s výpadky internetu, prověřte si další možnosti připojení na vaší adrese:

19. 7. 2025

Autor: Redakce DSL.cz