Os pesquisadores aprenderam a reconhecer o texto digitado em um smartphone usando alto-falantes inteligentes

Pesquisadores britânicos aprenderam a reconhecer textos digitados em smartphones usando alto-falantes inteligentes. A metodologia é baseada em tecnologias de processamento de sinais sonoros que um dispositivo móvel emite ao pressionar teclas do teclado da tela. O artigo correspondente foi publicado em arXiv.org.

Arxiv.org

O estudo foi conduzido pela equipe da Universidade de Cambridge. Para interceptar dados com sucesso, os invasores devem ter acesso ao alto-falante inteligente e ao microfone localizado nele. Além disso, os hackers devem ter uma cópia do dispositivo a partir do qual o texto é lido. Descobriu-se que os sons da digitação são específicos para smartphones e tablets, e até mesmo um filme de tela ou um case pode afetá-los.

Para conduzir o experimento, os especialistas precisaram de um chip ReSpeaker de seis microfones, usado na montagem de alto-falantes inteligentes, e de um microcomputador Raspberry Pi. Usando um chip, os pesquisadores gravaram o som e, em seguida, usando um algoritmo especial, analisaram e correlacionaram o som com teclas individuais. Para o reconhecimento, foram utilizados dois métodos – análise discriminante linear e rede neural convolucional.

A precisão do reconhecimento dependia do modelo do smartphone e do tipo de dados. Ao tentar reconhecer o código pin, a precisão foi de cerca de 15%, as palavras foram reconhecidas com uma precisão de 50%. As razões para esta diferença no reconhecimento de dados não são especificadas. Para proteger os dispositivos desse tipo de ataque, os pesquisadores sugeriram que os fabricantes tocassem sons de terceiros ao digitar.