Minecraft é um jogo sandbox, limitado apenas pela sua imaginação e criatividade, como demonstrado neste vídeo pelo YouTuber sammyuri. Utilizando a mecânica de materiais redstone do Minecraft original, o jogador conseguiu criar um modelo de linguagem de IA funcional e pequeno que roda dentro do jogo.
Fonte da imagem: YouTube / sammyuri
Se você já viu exemplos anteriores de engenharia extrema no Minecraft, provavelmente conhece o trabalho de sammyuri. Seu projeto mais recente, chamado CraftGPT, ocupa um volume de 1020 × 260 × 1656 blocos (439 milhões). É tão grande que o mod District Horizons foi necessário para demonstrá-lo no vídeo.
O pequeno modelo de linguagem possui 5.087.280 parâmetros e foi treinado em Python usando o conjunto de dados TinyChat. De acordo com alguns usuários que comentaram no vídeo, o modelo de linguagem CraftGPT é aproximadamente 23 vezes menor que o GPT-1 e aproximadamente 175.000 vezes menor que o GPT-3. Apesar do desempenho anunciado, sammyuri recomenda moderar as expectativas em relação ao CraftGPT: o modelo pode frequentemente se desviar do tópico e produzir respostas gramaticalmente incorretas ou simplesmente respostas que não correspondem à consulta.
Além disso, o CraftGPT é um modelo muito lento. Mesmo com um servidor Minecraft Redstone de alto desempenho para aumentar a taxa de tiques em 40.000 vezes, o CraftGPT pode gerar uma resposta em cerca de duas horas. Sem essa taxa de tiques aumentada, levaria mais de 10 anos para gerar uma resposta.
Os interessados em experimentar o CraftGPT podem baixar todos os arquivos necessários do GitHub. Sammyuri recomenda um PC com pelo menos 32 GB de RAM, idealmente 64 GB. O GitHub também contém instruções de configuração e algumas dicas úteis para aproveitar ao máximo este pequeno modelo de linguagem.