O agente de IA OpenClaw causou estragos na caixa de entrada de um pesquisador após ser solicitado a limpá-la.

Summer Yue, pesquisadora de segurança da Meta✴AI, relatou que o agente de IA OpenClaw “causou estragos” em sua caixa de entrada. Ao ser solicitada a verificar sua caixa de entrada lotada e sugerir itens para excluir ou arquivar, o OpenClaw começou a excluir todos os seus e-mails em “modo rápido”, ignorando os avisos enviados do telefone de Yue para interromper o processo.

Fonte da imagem: openclaw.ai

“Tive que correr para o meu Mac Mini como se estivesse desarmando uma bomba”, escreveu ela, publicando imagens de avisos ignorados solicitando a interrupção da varredura como prova.

O compacto Apple Mac Mini tornou-se recentemente o dispositivo preferido nos EUA para executar o OpenClaw. Com sua grande quantidade de RAM, é uma boa opção para executar assistentes de IA locais. Como um funcionário da Apple disse ao pesquisador de IA Andrej Karpathy, os Mac Minis estão vendendo como água. A espera pela entrega das versões com 24 GB ou 32 GB de RAM chega a três semanas após o pedido.

A publicação de Yue serve como um alerta para outros usuários de IA. Como membros da rede social X observaram, se uma pesquisadora de segurança de IA encontrou esse problema, que esperança temos nós, meros mortais?

“Você testou intencionalmente os mecanismos de segurança ou cometeu um erro de principiante?”, perguntou o desenvolvedor de software. “Francamente, um erro de principiante”, ela respondeu. Yue testou seu agente usando uma pequena caixa de correio “falsa”, como ela a chamou, e funcionou bem com e-mails menos importantes. Como o desempenho do agente lhe rendeu confiança, ela decidiu executá-lo em um dispositivo real.

Yue acredita que a grande quantidade de dados em sua caixa de correio real desencadeou o processo de compressão. A compressão ocorre quando a janela de contexto — o registro contínuo de tudo o que é dito e feito pela IA durante uma sessão — se torna muito grande, forçando o agente a resumir e comprimir para permanecer rápido e responsivo. Enquanto isso, o agente de IAPode ignorar instruções que um humano considera extremamente importantes.

Pode-se presumir que, neste caso, o sistema não recebeu a mensagem final do pesquisador, que o instruía a parar, e voltou a seguir as instruções para o endereço de e-mail “falso”.

Como outros participantes do estudo X observaram, os avisos não são confiáveis ​​como medida de segurança. Os modelos podem interpretá-los incorretamente ou ignorá-los.

admin

Postagens recentes

The Legend of California, um faroeste multiplayer do estúdio por trás de Overwatch, estará disponível para teste em breve – detalhes do alfa público.

Os desenvolvedores do Kintsugiyama Studio, liderados por Jeff Kaplan, cocriador de Overwatch, anunciaram as datas…

30 minutos atrás

A Forbes descobriu que os equipamentos da Roskomnadzor estão sobrecarregados e incapazes de lidar com o bloqueio do Telegram.

Os sistemas de filtragem de tráfego da Roskomnadzor, utilizados para restringir o acesso a recursos…

53 minutos atrás

A expansão da produção de chips é prejudicada pela falta de equipamentos de teste e embalagem.

Representantes da indústria de semicondutores admitiram ao Nikkei Asian Review que, neste momento, um dos…

53 minutos atrás

A interface do outrora promissor sistema operacional Fuchsia do Google foi revivida em um navegador.

Outrora um projeto promissor, o sistema operacional Fuchsia do Google tornou-se praticamente invisível, e suas…

2 horas atrás

A SpaceX realizou o primeiro teste de ignição da versão mais recente de seu foguete Super Heavy, que será capaz de chegar até a Lua.

Recentemente, na segunda plataforma de lançamento do complexo espacial Starbase, no Texas, a SpaceX realizou…

2 horas atrás