Pesquisadores do Facebook Reality Labs na conferência anual SIGGRAPH 2021 CG apresentaram um protótipo assustador de um fone de ouvido de realidade virtual com monitores externos que permitem que as pessoas vejam os olhos do usuário. O objetivo é fornecer ao usuário um contato visual com outras pessoas e tornar mais fácil para eles se comunicarem com alguém nas proximidades.
Facebook Reality Lab
À medida que os fones de ouvido de RV se tornam mais finos e mais confortáveis, será mais fácil para as pessoas usarem o modo olho no olho ao se comunicarem com alguém por perto do que remover o fone de ouvido inteiramente para ver os olhos da outra pessoa. Os fones de ouvido de realidade virtual modernos já possuem um modo de passagem – no qual o usuário vê o ambiente real. Mas seus interlocutores não têm como saber quando ele está ativando o pass-through e deseja contatá-los.
Usando visores de campo de luz montados no painel externo do fone de ouvido VR, o chamado sistema de “passagem reversa” exibe os olhos do usuário, levando em consideração a direção do olhar e sua profundidade no espaço.
Facebook Reality Lab
Para quem está de fora pode parecer que o fone de ouvido é muito grosso, mas ao mesmo tempo transparente. Mas a profundidade aparente é uma ilusão criada pela exibição do campo de luz na parte externa do fone de ouvido.
Se fosse uma tela normal, os olhos do usuário estariam longe do rosto, o que pareceria pouco natural. No vídeo, o pesquisador da Reality Labs Nathan Matsuda mostra o sistema sem mapeamento ocular (esquerda), com olhos sem profundidade de fone de ouvido (centro) e com mapeamento ocular e levando em consideração a profundidade (direita).
Curiosamente, a exibição do campo de luz permite que vários observadores vejam uma reprodução precisa da perspectiva (mapeamento de profundidade), independentemente do ângulo que eles estão em relação à pessoa que usa o fone de ouvido. No entanto, o que eles veem não é realmente a imagem real dos olhos do usuário. Na verdade, o rastreamento ocular é aplicado a um modelo 3D do rosto de um usuário, o que significa que o método é limitado pelo quão realista é o modelo e pela facilidade de criá-lo para cada pessoa.