O desenvolvimento do Projeto Gameface do Google permite controlar as expressões faciais do personagem do jogo – piscar, franzir a testa e sorrir

Ultimamente, tem havido muito trabalho na criação de controladores para pessoas com deficiência, e o Google está trabalhando em sua própria solução para eliminar totalmente os controladores do jogo. De acordo com relatos da mídia, como parte da iniciativa do Projeto Gameface, será possível controlar personagens e processos usando movimentos da cabeça, bem como expressões faciais.

Fonte da imagem: Google

O principal mecanismo, como o nome indica, é o controle por meio de expressões faciais. Embora controladores como o Microsoft Xbox Adaptive Controller tornem muito mais fácil se envolver no jogo com seu design especial e botões grandes e outros controles, a solução do Google oferece uma experiência completamente nova.

O “mouse” que rastreia os movimentos da cabeça já foi inventado há muito tempo, mas basicamente essas soluções técnicas registram movimentos distintos da cabeça ou piscam. O conhecido streamer Lance Carr, que sofre de distrofia muscular, usou esse equipamento antes que um incêndio destruísse seu hardware de jogo. Ao mesmo tempo, o incidente também teve um efeito positivo – foi depois disso que os engenheiros do Google começaram a melhorar seriamente a tecnologia.

O resultado foi o Projeto Gameface. “Gaming Mouse” é um software de código aberto que não requer controle manual e usa uma webcam comum voltada para o rosto do usuário para emitir comandos. O aprendizado de máquina permite que você rastreie 468 pontos únicos no rosto, o que possibilita ao GameFace reconhecer com precisão não apenas os movimentos da cabeça, mas também as expressões faciais. Por exemplo, esta ou aquela expressão facial é convertida em um clique do mouse ou outros comandos. O Project Gameface ainda permite que você personalize os controles para expressões faciais individuais, para que mesmo aqueles que mal conseguem controlar os músculos faciais possam tirar proveito da tecnologia.

Fonte da imagem: Google

O Google diz que o Projeto GameFace precisa ser finalizado e ainda não está pronto para uso em massa. No entanto, o código-fonte já está disponível no GitHub para quem quiser contribuir com o trabalho em andamento. É possível que a possibilidade de tal controle seja útil para pessoas saudáveis ​​- além dos controladores clássicos.