O Copilot Vision, um recurso que permite que o assistente de IA proprietário da Microsoft veja e entenda o que está acontecendo na tela do dispositivo do usuário, agora está disponível gratuitamente no navegador Edge. O anúncio foi feito pelo chefe da divisão de IA da Microsoft, Mustafa Suleyman.

Fonte da imagem: Microsoft
Ele também disse que o recurso Copilot Vision permite que o algoritmo de IA veja literalmente o que o usuário vê na tela. Essa inovação pode ser útil em diferentes situações, por exemplo, o Copilot pode sugerir uma receita para um prato exibido na tela. No entanto, ele não seguirá links de forma independente nem executará nenhuma ação em nome do usuário.
Recursos mais avançados do sistema Copilot Vision permanecerão disponíveis apenas para assinantes pagos do Copilot Pro. Com esta assinatura, o Copilot Vision vai além do Edge e pode ajudar você a interagir com outros aplicativos. Por exemplo, um assistente de IA lhe dirá como usar uma função específica do Photoshop, como passar por uma parte difícil de um jogo, etc.
Para começar a usar o Copilot Vision no seu navegador, você precisa usar o Edge para abrir a seção correspondente no site da Microsoft e confirmar seu consentimento para usar a função de IA. Depois disso, bastará abrir a barra lateral do Copilot e clicar no atalho com a imagem do microfone. O início do recurso Copilot Vision será acompanhado por um sinal sonoro característico, e o navegador também mudará ligeiramente o esquema de cores. A Microsoft supostamente registra as respostas do Copilot, mas não coleta informações do usuário, imagens ou conteúdo da página durante interações com o Copilot Vision. Para desabilitar a função, basta fechar a janela do navegador.
