Cloudflare dala AI firmám ultimátum: oddělte crawlery, nebo je od 15. září blokujeme
Od 15. září 2026 bude Cloudflare ve výchozím nastavení blokovat smíšené crawlery, které kombinují vyhledávání s AI tréninkem a agenty, na stránkách s reklamou. Vydavatelé dostávají páku, kterou jim robots.txt nikdy nedal.