O gerador de vídeo Sora da OpenAI chocou o mundo com seu realismo perturbador, mas o modelo parece ser ainda melhor na criação de mundos de jogos. De acordo com um artigo técnico da OpenAI publicado em 17 de fevereiro, Sora tem a incrível capacidade de recriar o Minecraft e “simular mundos digitais”.
Sora também pode simular processos artificiais, como videogames. Sora é capaz de controlar simultaneamente o jogador no Minecraft de acordo com regras básicas, enquanto reproduz o mundo e sua dinâmica com alta precisão. Esses recursos podem ser obtidos sem treinamento adicional, simplesmente especificando Sora na dica de ferramenta “Minecraft”.
O promissor modelo Sora da OpenAI tem o potencial de revolucionar o mundo dos videogames. A razão é que ele é fundamentalmente diferente de outros geradores de vídeo de IA, de acordo com o pesquisador sênior da Nvidia, Dr. Jim Feng. Ele diz que Sora é mais um “mecanismo de física baseado em dados” do que um gerador de imagens. Sora realiza milhares de cálculos para prever como um objeto irá interagir com seu ambiente. Isso cria um “modelo de mundo” ideal para a geração de games.
A OpenAI observa que estes são apenas os primeiros testes, mas são muito promissores para simuladores de IA de mundos reais e virtuais. A empresa lista várias limitações, em particular Sora ainda não é capaz de modelar com precisão a física das interações básicas, o que às vezes leva a resultados muito estranhos. Essas deficiências precisarão ser corrigidas antes que jogos completos sejam criados.
Porém, comparado a outros geradores, Sora já resolveu vários problemas. Ela demonstrou uma “percepção da permanência do objeto” bem-sucedida, um objeto pode sair do enquadramento e retornar ao mesmo lugar. Sora também é melhor no movimento dinâmico da câmera.

Relatos informam que Sora da OpenAI foi treinado no motor gráficos e construção de games, o Unreal Engine 5 da Epic Games. Embora Sora quase certamente não use um mecanismo pronto para uso para criar o vídeo, é possível que mundos digitais tenham sido usados durante o treinamento do modelo subjacente. A OpenAI não confirmou esses rumores, mas o UE5 tem sido usado em jogos como Fortnite, Remnant 2 e Tekken 8. Algumas demos de Sora lembram locais de jogos existentes.
Qual a sua opinião?