Cloudflare hari ini meluncurkan”Pay per Crawl,”sebuah inisiatif tengara untuk membentuk kembali model ekonomi web dengan memberdayakan penerbit terhadap pengikisan konten yang digerakkan oleh AI. Perusahaan, yang menangani lalu lintas sekitar 20% dari Internet, sekarang akan memblokir perayap AI secara default untuk pelanggan baru, menurut pengumumannya. Hal ini memungkinkan pembuat konten untuk menagih perusahaan AI untuk akses, respons langsung terhadap lalu lintas rujukan yang runtuh yang mengancam model bisnis dasar web.
Langkah ini merupakan respons langsung terhadap apa yang oleh CEO CloudFlare yang digambarkan oleh Pangeran Prince sebagai”ancaman eksistensial”terhadap penerbit online. Pada Juni 2025, Pangeran mengungkapkan data yang menakjubkan yang menunjukkan keruntuhan lalu lintas yang besar dari pencarian AI. Untuk setiap 1.500 halaman crawler Openai yang dikikis dari penerbit, itu hanya mengirim satu pengunjung kembali-penurunan dramatis dari rasio 250-ke-satu hanya enam bulan sebelumnya. Data untuk model AI lain bahkan lebih mengerikan, dengan rasio antropik memburuk menjadi 60.000-ke-satu. Tren ini mengeluarkan aliran pendapatan yang didukung iklan yang telah mempertahankan konten online selama beberapa dekade.
Danielle Coffey, CEO The News/Media Alliance, baru-baru ini menangkap frustrasi industri,