O agente de IA OpenClaw causou estragos na caixa de entrada de um pesquisador após ser solicitado a limpá-la.

Summer Yue, pesquisadora de segurança da Meta✴AI, relatou que o agente de IA OpenClaw “causou estragos” em sua caixa de entrada. Ao ser solicitada a verificar sua caixa de entrada lotada e sugerir itens para excluir ou arquivar, o OpenClaw começou a excluir todos os seus e-mails em “modo rápido”, ignorando os avisos enviados do telefone de Yue para interromper o processo.

Fonte da imagem: openclaw.ai

“Tive que correr para o meu Mac Mini como se estivesse desarmando uma bomba”, escreveu ela, publicando imagens de avisos ignorados solicitando a interrupção da varredura como prova.

O compacto Apple Mac Mini tornou-se recentemente o dispositivo preferido nos EUA para executar o OpenClaw. Com sua grande quantidade de RAM, é uma boa opção para executar assistentes de IA locais. Como um funcionário da Apple disse ao pesquisador de IA Andrej Karpathy, os Mac Minis estão vendendo como água. A espera pela entrega das versões com 24 GB ou 32 GB de RAM chega a três semanas após o pedido.

A publicação de Yue serve como um alerta para outros usuários de IA. Como membros da rede social X observaram, se uma pesquisadora de segurança de IA encontrou esse problema, que esperança temos nós, meros mortais?

“Você testou intencionalmente os mecanismos de segurança ou cometeu um erro de principiante?”, perguntou o desenvolvedor de software. “Francamente, um erro de principiante”, ela respondeu. Yue testou seu agente usando uma pequena caixa de correio “falsa”, como ela a chamou, e funcionou bem com e-mails menos importantes. Como o desempenho do agente lhe rendeu confiança, ela decidiu executá-lo em um dispositivo real.

Yue acredita que a grande quantidade de dados em sua caixa de correio real desencadeou o processo de compressão. A compressão ocorre quando a janela de contexto — o registro contínuo de tudo o que é dito e feito pela IA durante uma sessão — se torna muito grande, forçando o agente a resumir e comprimir para permanecer rápido e responsivo. Enquanto isso, o agente de IAPode ignorar instruções que um humano considera extremamente importantes.

Pode-se presumir que, neste caso, o sistema não recebeu a mensagem final do pesquisador, que o instruía a parar, e voltou a seguir as instruções para o endereço de e-mail “falso”.

Como outros participantes do estudo X observaram, os avisos não são confiáveis ​​como medida de segurança. Os modelos podem interpretá-los incorretamente ou ignorá-los.

admin

Postagens recentes

O criador de Kingdom Come: Deliverance trocou o desenvolvimento de jogos pelo filme Kingdom Come: Deliverance.

Daniel Vavra, diretor dos RPGs medievais de mundo aberto Kingdom Come: Deliverance e Kingdom Come:…

1 hora atrás

O Japão deixou de produzir televisores; a Panasonic também terceirizou a produção para a China.

A Panasonic, outrora famosa por suas TVs de plasma, abandonou a produção própria de televisores,…

1 hora atrás

“Rezo para que você esteja errado”: Uma fonte interna revelou o jogo principal da seleção de março da PS Plus, e os fãs não estão nada contentes.

Embora a editora Sony Interactive Entertainment ainda esteja se preparando para anunciar sua lista de…

2 horas atrás

Vídeo: Táxi voador da SkyDrive decola sobre Tóquio – voos comerciais serão lançados em 2028

A entrada em operação regular de aeronaves elétricas é agora determinada mais por fatores regulatórios…

2 horas atrás