IA ensinada a transformar rabiscos manuscritos em código de programa

A Ann S. Bowers Cornell College of Computing and Information Sciences revelou uma ferramenta de programação baseada no reconhecimento de manuscrito. A ponte entre o manuscrito e a parte de texto é um algoritmo de aprendizado de máquina que conecta um ao outro e permite que você programe em um nível intuitivo. Gráficos e diagramas desenhados à mão são traduzidos em código de máquina e incorporados ao programa.

Fonte da imagem: cornell.edu

«A interface baseada em caneta, chamada Notate, permite que os usuários de notebooks digitais computacionais — como os notebooks Jupyter baseados na Web e interativos — abram desenháveis ​​e escrevam diagramas à mão em linhas de código de computador tradicional digitalizado.

Contextos de programação manuscritos e textuais são montados por um modelo de aprendizado de máquina profundo. Em um exemplo, os usuários desenharam diagramas de circuitos quânticos nas margens de um notebook Jupyter e a IA vinculou os desenhos ao código digitado. A comunicação é realizada em ambas as direções: como um texto manuscrito com um código discado e na ordem inversa.

«Tal sistema seria ótimo para ciência de dados, em particular, para criar gráficos e gráficos, que então interagem com o código de texto, disse um dos autores do projeto. “Nosso trabalho mostra que a atual infraestrutura de programação está realmente nos atrasando. As pessoas estão prontas para esse tipo de oportunidade, e os desenvolvedores de interface de digitação devem tomar nota e oferecer suporte a imagens e interfaces gráficas dentro do código.”