Firma pencarian AI Perplexity telah membantah dengan tajam tuduhan dari raksasa keamanan web Cloudflare yang menggunakan”crawler siluman”yang menipu untuk mengikis data situs web yang tidak benar. Dalam pernyataan publik yang dikeluarkan 5 Agustus, kebingungan yang disebut analisis teknis CloudFlare “secara fundamental tidak memadai.”
Startup AI menuduh CloudFlare membingungkan agen AI yang diprakarsai pengguna yang sah dengan lalu lintas yang tidak terkait dari layanan pihak ketiga. Perselisihan online yang meningkat ini berpusat pada perbedaan penting antara asisten AI yang digerakkan pengguna dan bot web tradisional, mempertanyakan aturan-aturan web merangkak web yang mapan.
Cloudflare menuduh kebingungan yang ditipiskan pada 4 Agustus, ketika STEALTH STEALTH”
Konflik yang dikeluarkan pada 4 Agustus, ketika STEALTH STEALTH”
Konflik yang diabaikan pada 4 Agustus, ketika STEALTH”
Konflik yang dikeluarkan pada 4 Agustus. href=”https://blog.cloudflare.com/perplexity-is-using-sealth-undeclared-crawlers-to-evade-website-no-crawl-sutrtives/”target=”_ blank”> Cloudflare menerbitkan posting blog terperinci Mengakses kemuransiling dari standar yang didirikan. Investigasi dilaporkan dipicu oleh keluhan pelanggan. Pengguna ini mencatat bahwa meskipun secara eksplisit memblokir perayap resmi Perplexity, perclexitybot dan perplexity-user, konten mereka masih diakses oleh layanan AI.
Agen pengguna utama yang diidentifikasi adalah Mozilla/5.0.0.0.0.0. Safari/537.36, string generik yang dirancang untuk berbaur dengan lalu lintas manusia yang normal. Untuk mengkonfirmasi perilaku tersebut, Cloudflare menjalankan percobaan terkontrol pada domain baru yang tidak terindeks, menemukan kebingungan dapat merangkum konten rahasia yang ditempatkan di balik file `robots.txt` yang restriktif.
Laporan penulis Gabriel Corral menyatakan,”… kami mengamati perilaku merangkak siluman dari kemudahan… mereka tampaknya menjadi craw mereka. Menanggapi temuan ini, CloudFlare menghilangkan kebingungan dari program”Bot Terverifikasi”dan mulai secara aktif memblokir perilaku di seluruh jaringannya.
Sanggahan Perplexity: Kasus Identitas yang Salah dan Analisis Cacat
Sehari, Kebingungan yang ditembakkan kembali pada x , menyebut analisis itu”secara teknis diliputi”dan”diskualifikasi.”Argumen inti perusahaan adalah bahwa CloudFlare salah memahami teknologinya, yang didefinisikannya sebagai”agen yang digerakkan pengguna”yang mengambil informasi secara real-time untuk kueri pengguna tertentu, bukan”bot”tradisional.
Kebingungan berpendapat bahwa agen-agennya tidak memiliki perampokan yang tidak dipicu oleh Google oleh orang yang dipicu oleh Google. Klaim yang paling runcing adalah dugaan kesalahan lalu lintas dari layanan pihak ketiga yang disebut Browserbase.
Perusahaan menegaskan bahwa CloudFlare membingungkan agennya dengan jutaan permintaan harian dari layanan tersebut. Perplexity menyatakan,”Tampaknya Cloudflare bingung dengan permintaan harian 3-6m harian dari lalu lintas yang tidak terkait dari Browserbase, layanan browser cloud pihak ketiga…”, mencatat penggunaannya sendiri di bawah 45.000 permintaan harian.
Perplexity menawarkan dua penjelasan menggigit untuk kesalahan tersebut. Itu menyarankan”kegagalan analisis lalu lintas mendasar”oleh Cloudflare atau bahwa”Cloudflare membutuhkan momen publisitas yang cerdas dan kami-pelanggan mereka sendiri-dihindari menjadi nama yang berguna untuk mendapatkannya.”The company’s response was blunt, arguing that if a security firm cannot tell a helpful assistant from a malicious scraper, “this controversy reveals that Cloudflare’s systems are fundamentally inadequate for distinguishing between legitimate AI assistants and actual threats.”
In a final jab, Perplexity stated that when a company makes such significant errors, “when you misattribute millions of requests… and demonstrate a fundamental Kesalahpahaman tentang cara kerja asisten AI modern, Anda telah kehilangan klaim keahlian dalam ruang ini.”Pertukaran yang panas ini menyoroti ketidaksepakatan teknis dan filosofis yang mendalam membentuk web.
perang yang lebih luas atas aturan keterlibatan web
Bentrokan publik ini bukan insiden yang terisolasi tetapi pertempuran terbaru dalam perang industri yang lebih luas. Perplexity sebelumnya telah menghadapi kritik dari pengembang Robb Knight dan telah menerima ancaman hukum dari BBC atas praktik datanya.
Perselisihan menggarisbawahi ketegangan mendasar. Pengembang AI memerlukan data dalam jumlah besar, tetapi penerbit melihat konten mereka digunakan untuk menyalakan layanan yang mengkanibal lalu lintas dan pendapatan mereka. CEO Cloudflare sendiri menyebut ini sebagai”ancaman eksistensial”untuk penerbit.
Sentimen ini digaungkan oleh CEO Berita/Aliansi Media Danielle Coffey, yang menyesali keadaan pencarian saat ini, dengan mengatakan”Tautan adalah Kualitas Penukaran Terakhir yang memberikan lalu lintas penerbit dan pendapatan. Sekarang Google hanya mengambil konten dan menggunakannya dengan tidak ada pengembalian. Ini telah menyebabkan lanskap media yang retak di mana beberapa perusahaan Sue AI sementara yang lain menandatangani kesepakatan lisensi yang menguntungkan.
Sebagai tanggapan terhadap”perlombaan senjata”ini, Cloudflare telah membangun gudang senjata defensif untuk penerbit. Alat-alat ini termasuk”AI Labyrinth,”sebuah sistem yang dirancang untuk menjebak bot yang tidak patuh, dan”Pay per merangkak,”yang memungkinkan situs untuk mengenakan biaya untuk akses.
Pangeran telah yakin tentang menegakkan aturan baru ini, yang terkenal menyindir,”Dan Anda memberi tahu saya, saya tidak bisa menghentikan beberapa nerd dengan c-corporation di Palo Alto?”Hasil konflik taruhan tinggi antara Cloudflare dan kebingungan kemungkinan akan menetapkan preseden utama untuk hubungan masa depan antara AI dan web terbuka.