CloudFlareは、新しいボット防衛システムを立ち上げ、不要なAIスクレーパーをブロックするのではなく、誤解を招くことで従来のWebセキュリティ戦術を反転しました。本物のコンテンツを模倣しますが、本当の目的を果たさず、リソースを無駄にし、行動パターンを明らかにするAIに生成されたページ。
CloudFlareは、実際のページに埋め込まれた目に見えないリンクを静かに誘惑します。 src=”https://winbuzzer.com/wp-content/uploads/2024/12/cloudflare.jpg”>
後に続くと、スクレーパーは、実際のウェブページをシミュレートする製造されたテキストとデザイン要素で満たされたトラップに導かれます。 AIスクレーパーが本物ではないページを消費している場合、それは取得したい価値を得ていない場合、会社は公式発表で説明しました。ボットが従うことを期待する代わりに、AI Labyrinthはコンプライアンス違反を活用します。
偽のページは、検索エンジンによるインデックス作成を避けるように設計されたrel=”nofollow”属性を使用してリンクされますが、プロトコルを無視する積極的なクローラーに目に見えるように設計されています。計画。 2024年に、同社は既知のAIスクレーパーをブロックするためのワンクリックソリューションを導入し、トラフィック分析ツールを添付して疑わしい動作にフラグを立てました。
2か月後、Cloudflareはこれらのツールをすべてのユーザーに拡張し、クローラーアクティビティを提供し、OpenaiのGptbotのような主要なAIボットのクローラーアクティビティと簡素化されたオプトアウトを提供しました。欺ception
欺ceptionへのシフトは理論的ではありません。基本的なアクセスプロトコルの繰り返し違反によって駆動されました。 2024年6月、開発者のRobb Knightは、Robots.txt.txtのボットを明示的に軽減し、Nginx-Level Filtersを介して403ステータスコードを返した後でも、WebサイトRadwebとMacStoriesのブロックセクションにどのようにアクセスしたかを暴露しました。検出。ほぼ同時に、フォーブスは、クレジットなしでAIに生成されたポッドキャストで調査報告書の1つを使用したと非難したと非難した。元の記事は、属性を省略しながら人間の要約を模倣した方法で、Perplexityのプラットフォームで再現されました。また、Amazonは6月の後半に同様の苦情に関する内部調査を開始しました。 2024年9月の更新。これらの数字は、公開されていない、しかし自由にライセンスされていない-総合に大きく傾いているAIモデルトレーニングに関する出版社からの欲求不満を反映しています。ボットがデコイのページをcrawっているとき、CloudFlareは行動の署名をキャプチャします- IPアドレス、タイミングパターン、ナビゲーションパス-リクエストが正当なユーザーまたは自動エージェントから発生するかどうかを明らかにします。 Webサイトの所有者は、CloudFlareのダッシュボードを介して疑わしいクローラーを報告できます。確認された犯罪者が内部ブラックリストに追加され、繰り返しの俳優が検出されずにすり抜けるのが難しくなります。これらのツールは、継続的な適応執行を伴う欺ceptionベースの戦術を補完します。
防衛の背後にある商業的意味
セキュリティソリューションとして位置付けられていますが、AI LabyrinthはCloudflareのより広範な野心を示唆しています。拡張されたボットブロッキングを導入した同じ9月のロールアウトで、同社はデータライセンス市場の概念を浮かびました。
許可されていないスクレイピングの運用コストを引き上げることにより、CloudFlareは、AI企業がデフォルトでアクセスを取得するのではなく、アクセスの交渉に向けて促す可能性があります。したがって、AI Labyrinthは、抑止力とインセンティブとして機能します。不正なクローラーを採用し、ライセンスされたデータにアクセスしてより効率的なパスを前進させます。 CloudFlareの発表の数日前に、GoogleはクラウドセキュリティのスタートアップであるWizの320億ドルの買収を完了しました。この取引は、AIが支配する環境でデータパイプラインを保護することの戦略的重要性の増加を強調しています。
Cloudflareの賭けは、ボットがとにかくWebをcraい回る場合、会社はそれらを何もしないことを難しくするかもしれないということです。そして、そうすることで、コンテンツ保護チャレンジを動的なフィードバックループに変えます。ボットが餌を取るたびに防御を教えるものです。