Nvidia transforma prompts de texto simples em modelos 3D prontos para jogos

Nvidia

A NVIDIA apresentou recentemente um modelo inovador de inteligência artificial conhecido como Latte3D no evento GTC 2024. Este sistema avançado representa um avanço significativo em relação às iterações anteriores de modelos de texto para 3D, como o ChatGPT. Com sua capacidade de converter rapidamente descrições textuais concisas em objetos e criaturas tridimensionais detalhadas, o Latte3D tem o potencial de beneficiar enormemente os indivíduos que trabalham em vários setores, agindo como uma impressora 3D virtual.

Latte3D foi projetado como uma ferramenta acessível para vários profissionais criativos, incluindo aqueles envolvidos no desenvolvimento de videogames, projetos de design, campanhas publicitárias e treinamento em robótica. Conforme demonstrado pela Nvidia, usar o Latte3D é extremamente fácil de usar. Depois de fornecer uma breve entrada textual, a IA produz rapidamente um modelo 3D detalhado que pode então ser refinado a critério do usuário. Embora o produto final possa não possuir o mesmo nível de realismo que o Sora da OpenAI, o seu objetivo principal é agilizar o processo de geração de ativos, em vez de exigir que tudo seja construído do zero.

O modelo apresenta múltiplas alternativas ao usuário, que podem ser refinadas para melhorar a qualidade visual em um curto espaço de tempo. Estas criações podem posteriormente ser transferidas para várias plataformas, incluindo o Omniverse da Nvidia, onde podem ser ajustadas para se alinharem com o resultado preferido. Para desenvolver o Latte3D, a Nvidia utilizou suas poderosas GPUs Ada A100 Tensor Core e aproveitou o suporte de prompts ChatGPT para permitir uma interação perfeita com usuários genuínos.

Mergulhe em nossa análise semanal que disseca a tecnologia que impulsiona os jogos para PC, fornecendo um exame aprofundado de seu funcionamento e recursos internos.

A partir deste momento, o Latte3D é capaz de gerar apenas objetos e animais. No entanto, sua capacidade de distinguir entre diversas texturas de animais e tipos de objetos parece bastante adequada. Durante a demonstração da NVIDIA, eles exibiram objetos como um guindaste comum de crochê amigurumi e um gato esfinge de origami. O modelo foi treinado para diferenciar várias espécies, permitindo distinguir entre um galgo italiano e um Shiba Inu.

Apresentando o LATTE3D, um modelo inovador de inteligência artificial generativa de texto para 3D desenvolvido pelos pesquisadores inovadores da NVIDIA. Esta tecnologia avançada aproveita o poder do aprendizado profundo para converter descrições de linguagem escrita em modelos tridimensionais realistas com precisão e detalhes notáveis. Com aplicações em áreas como entretenimento, design e realidade virtual, o LATTE3D está preparado para revolucionar a forma como criamos e interagimos com conteúdo digital.

Indivíduos que desejam empregar o Latte3D para aplicações mais amplas podem considerar complementar seus dados de treinamento incorporando imagens de vários itens, incluindo artigos domésticos ou vegetação. Depois que esse conjunto de dados aumentado for utilizado, os usuários estarão livres para aplicar os recursos aprimorados aos seus projetos exclusivos. As possibilidades oferecidas pelo Latte3D vão muito além do domínio dos videogames; na verdade, a NVIDIA apresenta vários exemplos atraentes, como a preparação de robótica de assistência pessoal por meio de exercícios de treinamento preliminares antes da implantação.

Sanja Fidler, vice-presidente de pesquisa de IA da NVIDIA, destacou a notável melhoria na velocidade do Latte3D em comparação com iterações anteriores. Há um ano, a geração de visuais 3D de alta qualidade usando IA exigia a duração de uma hora; entretanto, atualmente, a mesma tarefa pode ser realizada em 10 a 12 segundos. A Sra. Fidler enfatizou que esse avanço representa um salto significativo, permitindo-nos alcançar resultados aproximadamente dez vezes mais rápido do que antes.

Avanços recentes na utilização de inteligência artificial no campo do desenvolvimento de videogames provaram ser altamente inovadores, com o Latte3D da Nvidia sendo adicionado a um inventário cada vez maior de recursos que poderiam revolucionar todo o processo de criação de jogos. Na verdade, só recentemente foi anunciado que a Nvidia desenvolveu personagens não-jogadores (NPCs) cujos diálogos foram inteiramente formulados através do uso de tecnologia de IA. Além disso, a Epic Games implementou um novo recurso em seu Unreal Engine que é capaz de gerar visuais cinematográficos de alta qualidade em tempo real usando algoritmos de aprendizado de máquina.

*️⃣ Link da fonte:

Nvidia ,