AI-Suchfirma Verwirrung hat die Anschuldigungen des Web-Sicherheitsgiganten CloudFlare stark widerlegt, dass es betrügerische „Stealth-Crawler“ verwendet, um Website-Daten nicht ordnungsgemäß zu kratzen. In einer öffentlichen Erklärung, die am 5. August veröffentlicht wurde, wurde die technische Analyse von Cloudflare „grundsätzlich unzureichend“ bezeichnet. Dieser eskalierende Online-Streit konzentriert sich auf eine entscheidende Unterscheidung zwischen benutzerorientierten AI-Assistenten und traditionellen Webbots, wobei die festgelegten Regeln des Webkriechens in Frage gestellt werden. href=”https://blog.cloudflare.com/perplexity-is-using-stealth-undeclared-crawlers-toevade-website-no-crawl-directives/”target=”_ leer”> cloudflare veröffentlichte einen detaillierten Blog-Beitrag Vorwürfe, der Verstoß gegen die veräußerlichen Webständer anfällig beschuldigt. Die Untersuchung wurde Berichten zufolge durch Kundenbeschwerden ausgelöst. Diese Nutzer stellten fest, dass trotz explizit blockierter Verwirrung der offiziellen Crawlers, Verwirrlichkeitsbot und Verwirrungsbenutzer der AI-Dienst nach wie vor zugegriffen wurde. verwendet einen”zweigleisigen Ansatz”. Wenn seine deklarierten Bots blockiert sind, scheint das Unternehmen nicht deklarierte Crawler einzusetzen, die Standard-Webbrowser ausgeben. Diese Bots wurden beobachtet, wie sie durch nicht börsennotierte IP-Adressen drehten und sogar ihre autonomen Quellensysteme (ASNs) in welchem Cloudflare als bewusster Versuch, ihre Aktivität zu verbergen, zu ändern. Safari/537.36, eine generische Saite, die mit dem normalen menschlichen Verkehr einfügt. Um das Verhalten zu bestätigen, führte CloudFlare ein kontrolliertes Experiment über neue, nicht indizierte Domänen durch und findet Verwirrung auf geheime Inhalte zusammen, die hinter restriktiven”Robots.txt”-Fateien platziert sind. In response to these findings, Cloudflare removed Perplexity from its “verified bot”program and began actively blocking the behavior across its network.
Perplexity’s Rebuttal: A Case of Mistaken Identity and Flawed Analysis
A day later, Verwirrung auf x und nannte die Analyse”technisch fehlerhaft”und”Disqualifying”. Das Kernargument des Unternehmens ist, dass CloudFlare seine Technologie missversteht, die als”benutzerorientierte Agenten”definiert, die Informationen in Echtzeit für die Abfrage eines bestimmten Benutzers und nicht als traditionelle „Bots“ erhalten. Die bekannteste Behauptung ist die mutmaßliche falsche Datenverkehr aus einem Drittanbieterdienst namens Browserbase. Verwirrte verblüfft:”Es scheint, dass Cloudflare verwirrt mit 3-6 Mio. täglichen Anfragen von nicht verwandtem Verkehr von Browserbase, einem Cloud-Browser-Service von Drittanbietern…”, wobei die eigene Verwendung unter 45.000 täglichen Anfragen liegt. Es schlug entweder auf einen „grundlegenden Verkehrsanalyse-Fehler“ durch CloudFlare oder „CloudFlare brauchte ein cleverer Publizitätsmoment erforderlich, und wir-ihr eigener Kunden-haben wir einen nützlichen Namen sein, um sie zu erhalten. Die Antwort des Unternehmens war stumpf und argumentiert, wenn ein Sicherheitsunternehmen einen hilfreichen Assistenten von einem böswilligen Schaber nicht mitteilen kann,”zeigt diese Kontroverse, dass die Systeme von Cloudflares für die Unterscheidung zwischen legitimen AI-Assistenten und tatsächlichen Bedrohungen grundlegend unzureichend sind. Missverständnisse darüber, wie moderne KI-Assistenten funktionieren, haben Sie jegliche Anspruch auf Fachwissen in diesem Bereich verwirkt.”Dieser hitzige Austausch unterstreicht die tiefen technischen und philosophischen Meinungsverschiedenheiten, die das Web prägen. Die Verwirrung wurde zuvor durch den Entwickler Robb Knight kritisiert und hat von der BBC über seine Datenpraktiken rechtliche Bedrohungen erhalten.
Der Streit unterstreicht eine grundlegende Spannung. KI-Entwickler benötigen große Datenmengen, aber Verlage sehen, dass ihre Inhalte verwendet werden, um Dienste zu betreiben, die ihren Verkehr und ihre Einnahmen ausschlachten. Der eigene CEO von Cloudflare hat dies als”existenzielle Bedrohung”für Verlage bezeichnet. Dies hat zu einer gebrochenen Medienlandschaft geführt, in der einige Sue-KI-Firmen lukrative Lizenzverträge unterzeichnen. Zu diesen Tools gehören”AI Labyrinth”, ein System, das nicht konforme Bots fangen soll, und”Pay pro Crawl”, mit dem Websites den Zugriff in Rechnung stellen können. Das Ergebnis des Konflikts mit hohem Einsatz zwischen Cloudflare und Verwirrung wird wahrscheinlich einen wichtigen Präzedenzfall für die zukünftige Beziehung zwischen AI und dem offenen Web schaffen.