Cloudflare wprowadza narzędzie do audytu AI, aby blokować dostęp do witryn botom AI zbierającym dane

Cloudflare zaprezentowało AI Audit, nowy zestaw narzędzi, które mają na celu zapewnienie właścicielom witryn i blogerom większej kontroli nad ich treścią i sposobem jej wykorzystania przez zautomatyzowane systemy. Narzędzie bezpieczeństwa umożliwi użytkownikom blokowanie lub zezwalanie botom sztucznej inteligencji (AI), które często przeszukują witryny w celu zbierania danych. Firma oferuje to narzędzie wszystkim swoim obecnym klientom bez żadnych dodatkowych opłat. Cloudflare dodaje również funkcję umożliwiającą właścicielom witryn przeglądanie szczegółowych analiz dotyczących tego, które boty odwiedzają platformę i jakie są ich wzorce zachowań.

Wraz ze wzrostem popularności technologii generatywnej AI nastąpił pośpiech w trenowaniu dużych modeli językowych (LLM) przy użyciu danych tworzonych przez ludzi. Jest to ważne nie tylko w celu stworzenia modelu podstawowego, ale także w celu jego rozwoju i ulepszenia. Jednak głównym problemem jest tutaj dostęp do publicznie dostępnych źródeł danych. Większość firm AI już przeszła przez te zestawy danych i teraz potrzebuje więcej danych do trenowania modeli AI.

Boty AI są zaprojektowane, aby pomóc programistom zebrać więcej informacji w celu trenowania modeli AI. Można je rozumieć jako systematyczne programy imitujące prawdziwego użytkownika, który może wchodzić na strony internetowe i kopiować dane tekstowe, graficzne i wideo. Te boty AI mogą przeszukiwać duże ilości danych w krótkim czasie i dostarczać je do modelu AI. W ostatnim czasie kilka firm medialnych i dużych witryn internetowych złożyło pozwy przeciwko firmom AI, zarzucając im plagiat i nielegalne wykorzystywanie danych do zasilania LLM.

Narzędzie Cloudflare AI Audit jest warstwą ochronną, która może blokować dostęp takich botów do stron internetowych. Firma ujawniła w komunikat prasowy który również wprowadził ulepszenia do narzędzia, aby dać użytkownikom większą kontrolę nad tym, które boty będą ograniczone, a które będą miały dostęp. Jest to przydatne w przypadkach, gdy platforma zawarła umowę z firmą AI i nie przeszkadza jej, że jej boty pobierają dane. Alternatywnie, właściciel witryny może chcieć przyznać dostęp do niektórych modeli AI, które przypisują źródło danych, aby uzyskać lepszy zasięg.

Cloudflare podkreśliło, że buduje również przepływ pracy, w którym właściciele witryn mogą ustalić uczciwą cenę za swoje treści. Z drugiej strony właściciele botów AI będą mogli dokonywać transakcji za pomocą tej zapory sieciowej, a po zapłaceniu kwoty otrzymają prawo do skanowania treści. Firma podkreśla, że ​​jej narzędzie przypominające rynek może być korzystne dla użytkowników, którzy nie mają przepustowości ani zasobów do negocjowania i zawierania umów z każdą firmą AI, która zgłasza się do ich witryny.