O desenvolvedor de inteligência artificial Stability AI criou uma tecnologia generativa de IA que pode gerar imagens 3D na velocidade da luz. Embora anteriormente exigisse hardware poderoso e programação complexa, o modelo de dois bilhões de parâmetros do Stable Fast 3D agora pode gerar imagens vibrantes e fotorrealistas a partir de texto ou referência em apenas meio segundo, relata VentureBeat.
Fonte da imagem: Stability.ai
Segundo a empresa, a tecnologia marca um avanço significativo na área de modelagem 3D, reduzindo o tempo de processamento de imagens. “Isso é 1.200 vezes mais rápido do que nosso modelo Stable Video 3D anterior, lançado em março, que levava até 10 minutos para criar apenas um objeto 3D”, observa Stability AI.
Stable Fast 3D promete ser uma ferramenta poderosa para uma variedade de setores, incluindo design, arquitetura, varejo, realidade virtual e desenvolvimento de jogos. É baseado na tecnologia TripoSR, desenvolvida em colaboração com a empresa de modelagem 3D Trip AI.
Fonte da imagem: Stability.ai
Um artigo de pesquisa publicado pela Stability AI detalha os métodos usados pelo novo modelo para reconstruir rapidamente malhas 3D de alta qualidade a partir de imagens 2D convencionais. A essência do método é aumentar a velocidade de geração do resultado final sem perder qualidade. Ao mesmo tempo, a tecnologia utiliza uma rede neural transformadora avançada para criar imagens volumétricas de alta resolução sem aumento significativo no poder computacional, o que permite reduzir artefatos e obter modelos 3D mais detalhados.
Além disso, Stable Fast 3D adota uma abordagem inovadora para avaliar iluminação e materiais. O modelo de IA pode determinar valores globais, como rugosidade, líquido ou metal, usando um método de probabilidade que melhora a qualidade da imagem. A tecnologia também permite combinar vários elementos necessários para uma imagem 3D, incluindo malhas, texturas e propriedades de materiais, em um ativo 3D compacto e pronto para uso.
Curiosamente, a Stability AI continua a expandir ativamente os limites da IA generativa, passando de 2D para 4D. A empresa, que iniciou sua jornada gerando imagens a partir de texto – Stable Diffusion, lançou Stable 3D em novembro de 2023. Em março deste ano, estreou a tecnologia Stable Video 3D com a capacidade de basicamente movimentar a câmera para visualizar imagens e melhorar a qualidade de geração de imagens 3D. E na semana passada anunciou a tecnologia Stable Video 4D, que adiciona uma dimensão temporal à geração de vídeos curtos em 3D.
O modelo Stable Fast 3D está disponível por meio do chatbot Stable Assistant do Stability AI, Stability AI API e licenciado pela comunidade de pesquisa Hugging Face.