NVIDIA abre portais do Omniverse com IAs generativas para remixagem 3D e RTX

Seja criando personagens virtuais realistas capazes de expressar emoções humanas ou construindo mundos virtuais imersivos, profissionais em todo o mundo estão atingindo novos patamares por meio de workflows em 3D. Animadores, criadores e desenvolvedores podem usar novas ferramentas com tecnologia fornecida por inteligência artificial (IA) para recriar ambientes 3D, simulações e metaverso: a evolução 3D da internet. Com base na estrutura Universal Scene Description (USD), o NVIDIA Omniverse, plataforma de computação que possibilita o desenvolvimento de aplicações de metaversos, está expandindo com melhorias do Blender e um novo conjunto de ferramentas experimentais de IA generativas para artistas 3D.

Em uma apresentação especial na CES 2023, a NVIDIA anuncia esses recursos, bem como a pré-instalação do Omniverse em notebooks NVIDIA Studio e milhares de novos elementos artísticos USD gratuitos para ajudar a acelerar a adoção de  workflows 3D.

“A IA já faz parte do nosso cotidiano e agora pode facilitar ainda mais a vida de diversos profissionais de design, engenharia, criativos e indústrias ao redor do mundo. As inovações da NVIDIA otimizam todo o processo de criação, o que ajuda a gerar mais tempo para áreas estratégicas e criativas de diversos projetos”, comenta Marcio Aguiar, diretor da divisão Enterprise da NVIDIA para América Latina.

Além disso, um novo lançamento do Blender, agora disponível no Inicializador do Omniverse, está trazendo recursos de IA generativos 3D para todos os usuários do Blender. Um novo painel permite que os usuários do Blender transfiram facilmente chaves de formas e personagens manipulados. Antes, recolocar a cabeça cortada de um personagem manipulado era bastante complicado. Agora basta pressionar um botão do Omniverse Audio2Face, ferramenta habilitada para IA que gera automaticamente expressões faciais realistas a partir de um arquivo de áudio. Além disso, um novo painel de otimização de cenas permite que os usuários criem com maior facilidade cenas USD em workflows 3D que utilizam várias aplicações em tempo real. Ainda, Audio2Face, Audio2Gesture e Audio2Emotion, ferramentas generativas de IA que possibilitam a animação instantânea de personagens 3D, estão recebendo atualizações de desempenho para facilitar a integração nos pipelines 3D de desenvolvedores e criadores. Os criadores podem gerar expressões faciais a partir de um arquivo de áudio usando o Audio2Face; emoções realistas desde felizes e animados até tristes e desapontados com o Audio2Emotion; e movimento realista na parte superior do corpo usando o Audio2Gesture. Essas ferramentas de áudio para animação são revolucionárias para artistas 3D, eliminando a necessidade de realizar tarefas tediosas e manuais.

Ferramentas de criação com IA estão expandindo para comunidades de todos os tipos de profissionais criativos e técnicos. Quando o NVIDIA Canvas foi lançado, permitiu que os artistas gerassem paisagens e iterassem perfeitamente com simples pinceladas e IA. Em breve, todos os usuários do RTX poderão fazer o download de uma atualização do Canvas que introduz imagens surround em 360, criando e conceitualizando ambientes com panorâmicas e belas imagens. O AI ToyBox, que conta com extensões derivadas de NVIDIA Research, permite que os criadores gerem malhas 3D a partir de entradas 2D.

As poderosas ferramentas de IA do Omniverse simplificam tarefas complexas. Criadores de todos os níveis podem explorar esses recursos para produzir resultados de alta qualidade que atendam às crescentes demandas por conteúdo e mundos virtuais no metaverso.

“A demanda por habilidades 3D está disparando, mas aprender 3D pode ser bastante assustador para alguns e, definitivamente, requer tempo”, comenta Jae Solina, também conhecido como JSFilmz. “Mas esses novos desenvolvimentos da plataforma não apenas permitem que profissionais criativos e técnicos continuem a trabalhar em suas ferramentas 3D favoritas, como também turbinam seu trabalho e até usam IA para ajudá-los em seus workflows.”

O Omniverse Launcher, portal para fazer download de conteúdo e aplicações de referência do Omniverse, também foi disponibilizado aos desenvolvedores de sistemas para que possa ser pré-instalado para possibilitar experiências otimizadas e inovadoras para criadores 3D em notebooks validados pelo NVIDIA Studio.

Os usuários do Omniverse também podem acessar milhares de novos elementos artísticos USD gratuitos, incluindo uma experiência de Minecraft com NVIDIA RTX Winter World baseada em USD. Além de aprender a criar os próprios elementos artísticos do NVIDIA SimReady para construção de simulação complexa. Com o Omniverse, os criadores podem turbinar os workflows existentes usando ferramentas conhecidas como Autodesk Maya, Autodesk 3ds Max, Blender, Adobe Substance 3D Painter e muito mais com IA, ferramentas de simulação e renderização aceleradas por RTX em tempo real.

Todos os tipos de criadores 3D podem aproveitar essas novas ferramentas para ultrapassar os limites da simulação 3D e da criação de mundos virtuais. Os usuários podem reimaginar mundos digitais e animar personagens realistas com novas possibilidades de criação por meio da conexão de ferramentas de áudio para animação, IA generativas e metaverso.

Últimas atualizações da plataforma Omniverse 

As últimas atualizações do Omniverse incluem:

  • Acesso antecipado ao conector Unity Omniverse já está disponível.
  • A versão alfa do Blender, disponível no Omniverse Launcher, permite que usuários corrijam a geometria, gerem UVs automáticas e substituam dados CAD de alta resolução por pontos de polígonos utilizáveis.
  • Audio2FaceAudio2Emotion e Audio2Gesture recebem novas atualizações para possibilitar animações instantâneas e realistas de personagens, agora disponíveis no Omniverse Audio2Face e no Omniverse Machinima
  • NVIDIA Canvas será disponibilizado no Omniverse Launcher em breve com novos recursos que permitem a criação de paisagens de 360 graus com pinceladas simples. Os usuários podem importar os ambientes para aplicações em 3D para testar diferentes configurações e iluminação.
  • AI ToyBox de ferramentas experimentais, desenvolvidas pela NVIDIA Research, que incluem o Get3D (uma extensão do Omniverse que gera modelos 3D treináveis a partir de imagens 2D), permitindo que os desenvolvedores usem os próprios conjuntos de dados para criar modelos para mundos virtuais 3D com rapidez, está disponível no Omniverse Extension Manager.
  • Milhares de novos elementos artísticos em 3D gratuitos estão disponíveis em todo o mundo para os usuários construírem e criarem no Omniverse.

Os interessados podem assistir à apresentação especial da NVIDIA na CES.

Os criadores podem baixar o NVIDIA Omniverse gratuitamente, enviar seu trabalho para a galeria do NVIDIA Omniverse e encontrar recursos em fórunsMediumTwitter, YouTubeTwitchInstagram e Discord.

Fiquem ligados em nosso canal do YouTube para não perder a cobertura de eventos, lives e vídeos de notícias, curiosidades e gameplay.

Confira também outras matérias e análises em nosso site: