\nO Google atualizou sua classificação do Android Bench, que apresenta modelos avançados de inteligência artificial e avalia suas capacidades para desenvolver aplicativos Android. Anthropic Fable 5 foi incluído na lista e imediatamente ficou em primeiro lugar.\n\n

\n\nFonte da imagem: developer.android.com/bench\n\nA empresa mudou o mecanismo de classificação dos modelos de IA, abandonando o principal sistema de benchmarking em favor da estrutura Harbour padronizada. Mudar para esta estrutura permitirá que os desenvolvedores Android usem as mesmas ferramentas para analisar modelos de IA para casos de uso específicos – o Google abriu o Android Bench para usuários que desejam enviar tarefas de desenvolvimento Android. Essas tarefas podem ser usadas para avaliar como os modelos lidam com cada cenário. Os desenvolvedores também são incentivados a compartilhar os resultados de seus testes.\n\nO gigante das buscas, que tradicionalmente valoriza abordagens abertas e transparentes, disponibilizou publicamente sua metodologia e seu banco de testes no GitHub. O Google também atualizou o ranking usando uma nova estrutura, com Anthropic Claude Fable 5 ocupando o primeiro lugar por uma margem significativa, com pontuação de 84,5%. Em segundo lugar ficou o OpenAI GPT-5.5 com pontuação de 80,2%; o terceiro ficou com Claude Sonnet 5, que foi de 8,3 p.p. atrás do líder da classificação. Todos os modelos anteriormente incluídos na classificação receberam novas classificações.\n

By admin

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *