A Cloudflare revelou uma nova ferramenta de auditoria de IA que permitirá aos proprietários de sites monitorar como seu conteúdo está sendo usado por bots de IA e bloqueá-los de acessar suas informações ou definir um preço para seu uso.
A Cloudflare introduziu anteriormente uma ferramenta que simplesmente impedia a coleta de textos e imagens para treinamento de IA – scraping. Agora, conforme relata SiliconANGLE, a empresa anunciou uma expansão de sua funcionalidade com o lançamento do AI Audit, uma ferramenta que fornece um conjunto de recursos para ajudar a analisar as ações de bots de IA e monetizar conteúdo.
A raspagem de texto e imagens tornou-se uma prática comum na indústria de IA, pois a Internet oferece uma riqueza de conteúdo que pode ser usada para treinar modelos. No entanto, isto é controverso, pois muitos editores acreditam que tais ações são injustas, especialmente quando não estão cientes de que os seus materiais estão a ser utilizados (essencialmente ilegais). No entanto, empresas líderes de IA como OpenAI, Google, Meta✴, Stability AI, IBM e Microsoft admitem abertamente que utilizam conteúdo de editores, citando a doutrina de uso justo.
No entanto, os críticos argumentam que o scraping terá um impacto negativo nos editores, ao perder tráfego e lucros potenciais. Por exemplo, um site de receitas pode perder uma parte significativa de seu público para chatbots que usam seu conteúdo para responder às dúvidas dos usuários. Se o usuário receber informações de inteligência artificial, é improvável que ele tenha incentivo para visitar o próprio site, mesmo que ele esteja listado como fonte.
Alguns editores já começaram a bloquear o acesso da IA aos seus recursos. Por exemplo, no mês passado, o The New York Times e a CNN bloquearam oficialmente o GPTBot da OpenAI. Ao mesmo tempo, outros sites, como o Reddit, oferecem acesso ao seu conteúdo mediante pagamento de uma taxa por meio de APIs especiais que permitem às empresas de IA pagar pelo uso dos dados.
A Cloudflare está comprometida em capacitar todos os proprietários de sites para controlar como seu conteúdo é usado. A Auditoria de IA, que inclui a função de bloquear o acesso a quaisquer bots e análises de IA, foi projetada precisamente para garantir transparência na interação entre criadores de conteúdo e desenvolvedores de IA. A ferramenta ajudará a determinar quando, com que frequência e por que os modelos de IA acessam as páginas do site, bem como detectar bots que indicam a fonte de dados e aqueles que não o fazem.
Além disso, a AI Audit ajudará os proprietários de sites a determinar um preço justo para acessar o conteúdo com base nas taxas de mercado definidas por grandes editores como o Reddit. A Cloudflare diz que isso é necessário porque muitos sites menores não têm recursos ou experiência para definir o preço de seu conteúdo e negociar com empresas de IA. Ao mesmo tempo, as próprias empresas também não têm a oportunidade de celebrar acordos separados com cada um dos milhões de sites.
«Se os criadores de conteúdo não tiverem esse controle, a qualidade da informação online se deteriorará ou ficará disponível apenas por meio de assinaturas pagas, afirma o cofundador e CEO da Cloudflare, Matthew Prince. “Com a escala e a infraestrutura global da Cloudflare, podemos fornecer ferramentas e definir padrões que proporcionem aos sites, editores e criadores de conteúdo controle e remuneração justa por suas contribuições à Internet, ao mesmo tempo que permitimos que os provedores de modelos de IA continuem a inovar.”