Microsoft permite que o Copilot Studio controle computadores a pedido do usuário

A Microsoft adicionou um novo recurso “Usar Computador” ao Copilot Studio que permite que agentes de IA interajam com sites e aplicativos de desktop. O Copilot Studio, assim como o OpenAI Operator antes dele e recursos semelhantes no Anthropic Claude, pode usar sites e softwares locais como ferramentas para automatizar tarefas de trabalho.

Fonte da imagem: microsoft.com

«Usar um computador permite que os agentes interajam com sites e aplicativos de desktop clicando em botões, selecionando itens de menu e inserindo texto em campos na tela. Os agentes executam tarefas mesmo quando não há API para conexão direta ao sistema. “Se um humano pode usar o aplicativo, um agente também pode”, disse a Microsoft sobre o novo recurso.

No Copilot Studio, você pode criar agentes de IA que podem automatizar a entrada de dados, conduzir pesquisas de marketing ou processar documentos contábeis. A IA, diz a Microsoft, é treinada para detectar quando o posicionamento dos botões em aplicativos ou sites muda e continua a trabalhar sem interrupção.

A Microsoft adicionou anteriormente um recurso de Ações semelhante à versão de consumidor do Copilot, que executa ações em segundo plano enquanto uma pessoa está ocupada com outras tarefas. O Copilot pode reservar mesas em restaurantes, comprar ingressos para eventos e comprar produtos em lojas online. Enquanto o Actions é limitado a parceiros estabelecidos da Microsoft, o Copilot Studio oferece acesso gratuito a uma gama maior de sites e aplicativos.