A IBM espera criar meios inteligentes para desenvolver uma espécie de ImageNet analógico, que realmente se tornou um conjunto padrão de imagens para modelos de treinamento II. Na Think Conference, a empresa informou que, para isso, coletou uma grande variedade de código-fonte.
O conjunto chamado Project Codenet contém 14 milhões de amostras com um volume total de 500 milhões de linhas de código em mais de 55 idiomas de programação: de Java, C e vão para COBOL, PASCAL e FORTRAN. No entanto, mais de três quartos de todo o código cai em C ++ e Python.
A fonte do código foi as duas competições de programação japonesa: Aizu e ATCODER. Sob os termos de competições, os participantes deveriam escrever o código necessário para transformar a discagem especificada de dados de entrada em um conjunto de saída desejada para 4000 tarefas diferentes. Assim, foram obtidas 14 milhões de amostras de código, aproximadamente metade dos quais eram trabalhadores, e o restante foi marcado como erros não compilados, incorretos ou contendo contendo.
O IBM quer que o projeto Codenet segue nas pilhas de ImageNet e tenha se tornado um conjunto de dados padrão de fato para a aprendizagem II modelos que podem reconhecer a estrutura dos programas. Assume-se que Codenet pode ser usado para criar ferramentas de desenvolvimento inteligentes que procurem os procedimentos necessários em aplicativos e bibliotecas, transferir de uma linguagem de programação para outra, seleção das implementações corretas e expressa errônea, classificação do código e assim por diante.