Maya coloca cada novo modelo à prova — números primeiro, hype nunca.
Se inspirou nesta história? Transforme a ideia na sua própria arte com IA em segundos — comece de graça, sem cartão.
Começar de graçaEscolha um companheiro e veja o que ele acha dessa história
A NVIDIA apresentou o TRELLIS.2, um novo pipeline de geração de ativos 3D que, segundo relatos, reduz o tempo de criação de horas para segundos — uma aceleração de 99% — para artistas de IA que trabalham com imagens 2D. Este avanço visa otimizar significativamente a produção de conteúdo 3D, tornando-a mais rápida e acessível para a integração de elementos gerados por IA em mundos virtuais, jogos e animações.
A criação tradicional de ativos 3D a partir de entradas 2D é um processo demorado, muitas vezes exigindo modelagem manual, texturização e otimização. O TRELLIS.2 aborda isso empregando um fluxo de trabalho multifásico e impulsionado por IA. A ideia central é gerar rapidamente uma estrutura 3D fundamental e, em seguida, adicionar progressivamente detalhes e texturas usando técnicas de renderização neural.
A abordagem da NVIDIA começa convertendo imagens 2D em tokens de características, que então informam a criação inicial de uma representação 3D grosseira. Esta fase inicial foca no estabelecimento da forma e estrutura geral, em vez de detalhes intrincados, permitindo uma iteração rápida. Para artistas de IA, isso significa ser capaz de testar rapidamente diferentes conceitos e composições sem esperar horas por uma renderização básica.
O pipeline TRELLIS.2 opera em duas etapas principais. A Etapa 1 foca na geração de um modelo 3D preliminar, descrito como um campo O-Voxel. Esta é uma representação volumétrica de baixa resolução que captura a forma geral do objeto. Segundo a NVIDIA, esta etapa inicial é crucial pela sua velocidade, fornecendo uma forma utilizável quase instantaneamente.
A Etapa 2 então refina esta forma inicial. Aqui, o sistema aproveita técnicas como Neural Radiance Fields (NeRFs) e 3D Gaussian Splatting. NeRFs são conhecidos por sua capacidade de renderizar cenas complexas com iluminação e reflexos intrincados a partir de algumas imagens de entrada, enquanto 3D Gaussian Splatting oferece capacidades de renderização em tempo real. Ao combinar estas técnicas, o TRELLIS.2 adiciona texturas, materiais e efeitos de iluminação de alta fidelidade ao modelo 3D grosseiro, transformando-o em um ativo detalhado e pronto para uso. Este refinamento iterativo permite um nível de detalhe que, de outra forma, exigiria extenso trabalho manual.
Para criadores que usam plataformas como os geradores de imagem da Charmloop, a capacidade de converter rapidamente uma imagem 2D gerada por IA em um ativo 3D poderia abrir novas avenidas para a expressão criativa, particularmente no desenvolvimento de jogos ou design de ambientes virtuais. Isso se alinha com tendências mais amplas da indústria em direção à integração de IA em fluxos de trabalho 3D, como visto em outros desenvolvimentos recentes, como as ferramentas de navegação de fotos 3D da Adobe. Você pode aprender mais sobre técnicas como NeRF em nossa seção de guias.
A NVIDIA afirma explicitamente que o TRELLIS.2 é otimizado para seu hardware de GPU, o que não é surpreendente dada a intensidade computacional da renderização neural e da reconstrução 3D. O pipeline se integra aos ecossistemas de software 3D existentes, suportando formatos de exportação padrão, garantindo que os ativos gerados sejam compatíveis com ferramentas populares usadas por artistas 3D. Este foco na compatibilidade é crítico para a adoção, pois minimiza a interrupção dos pipelines de produção estabelecidos.
"O pipeline TRELLIS.2 pode gerar um ativo 3D de alta qualidade a partir de uma única imagem 2D em meros segundos."
— NVIDIA Blog
Embora o número de 99% de aceleração seja convincente, benchmarks independentes ainda não estão disponíveis. No entanto, se o desempenho relatado se mantiver, o TRELLIS.2 poderá reduzir significativamente a barreira de entrada para a criação de conteúdo 3D, permitindo que mais artistas de IA experimentem cenas e animações 3D complexas. Isso também poderia impactar a economia da geração de ativos, potencialmente reduzindo a necessidade de extensa mão de obra manual e custos associados. Para criadores interessados nos modelos subjacentes, explorar o catálogo de modelos da Charmloop pode fornecer insights sobre diversas capacidades de IA.
A rápida geração de ativos 3D também tem implicações para aplicações em tempo real e experiências interativas, onde a demanda por conteúdo 3D único e de alta qualidade está em constante crescimento. A capacidade de gerar ativos sob demanda poderia levar a ambientes virtuais mais dinâmicos e personalizados.