Maya는 새 모델이 나올 때마다 직접 벤치마크합니다 — 숫자가 먼저, 과장은 없습니다.
이 이야기에서 영감을 받으셨나요? 그 아이디어를 단 몇 초 만에 나만의 AI 아트로 만들어 보세요. 무료로 시작할 수 있고, 카드 등록도 필요 없습니다.
무료로 만들기 시작컴패니언을 선택하고 이 소식에 대한 생각을 들어보세요
NVIDIA는 2D 이미지로 작업하는 AI 아티스트를 위해 3D 에셋 생성 시간을 몇 시간에서 몇 초로 단축하여 99% 가속화하는 새로운 3D 에셋 생성 파이프라인인 TRELLIS.2를 도입했습니다. 이 발전은 3D 콘텐츠 제작을 크게 간소화하여 AI 생성 요소를 가상 세계, 게임 및 애니메이션에 통합하는 것을 더 빠르고 쉽게 만드는 것을 목표로 합니다.
2D 입력에서 전통적인 3D 에셋 생성은 수동 모델링, 텍스처링 및 최적화가 필요한 시간이 많이 소요되는 프로세스입니다. TRELLIS.2는 다단계 AI 기반 워크플로를 사용하여 이 문제를 해결합니다. 핵심 아이디어는 기본적인 3D 구조를 빠르게 생성한 다음 신경 렌더링 기술을 사용하여 세부 사항과 텍스처를 점진적으로 추가하는 것입니다.
NVIDIA의 접근 방식은 2D 이미지를 특징 토큰으로 변환하는 것으로 시작하며, 이 토큰은 거친 3D 표현의 초기 생성에 정보를 제공합니다. 이 초기 단계는 복잡한 세부 사항보다는 전체적인 모양과 구조를 설정하는 데 중점을 두어 빠른 반복을 가능하게 합니다. AI 아티스트의 경우, 이는 기본적인 렌더링을 위해 몇 시간을 기다릴 필요 없이 다양한 개념과 구성을 빠르게 테스트할 수 있음을 의미합니다.
TRELLIS.2 파이프라인은 두 가지 주요 단계로 작동합니다. 1단계는 O-Voxel 필드로 설명되는 예비 3D 모델 생성에 중점을 둡니다. 이는 객체의 일반적인 형태를 포착하는 저해상도 볼륨 표현입니다. NVIDIA에 따르면, 이 초기 단계는 속도에 결정적이며 거의 즉시 사용할 수 있는 모양을 제공합니다.
2단계는 이 초기 모양을 정교화합니다. 여기에서 시스템은 NeRF(Neural Radiance Fields) 및 3D Gaussian Splatting과 같은 기술을 활용합니다. NeRF는 몇 개의 입력 이미지에서 복잡한 조명과 반사가 있는 복잡한 장면을 렌더링하는 능력으로 알려져 있으며, 3D Gaussian Splatting은 실시간 렌더링 기능을 제공합니다. 이들을 결합함으로써 TRELLIS.2는 거친 3D 모델에 고품질 텍스처, 재료 및 조명 효과를 추가하여 상세하고 바로 사용할 수 있는 에셋으로 변환합니다. 이러한 반복적인 정교화는 광범위한 수동 작업이 필요한 수준의 세부 사항을 가능하게 합니다.
Charmloop의 이미지 생성기와 같은 플랫폼을 사용하는 크리에이터의 경우, 2D AI 생성 이미지를 3D 에셋으로 빠르게 변환하는 기능은 특히 게임 개발 또는 가상 환경 디자인에서 창의적인 표현을 위한 새로운 길을 열 수 있습니다. 이는 Adobe의 3D 사진 탐색 도구와 같은 다른 최근 개발에서 볼 수 있듯이 AI를 3D 워크플로에 통합하려는 광범위한 산업 동향과 일치합니다. NeRF와 같은 기술에 대한 자세한 내용은 가이드 섹션에서 확인할 수 있습니다.
NVIDIA는 TRELLIS.2가 자사의 GPU 하드웨어에 최적화되어 있다고 명시적으로 밝히고 있는데, 이는 신경 렌더링 및 3D 재구성의 계산 집약도를 고려할 때 놀라운 일이 아닙니다. 이 파이프라인은 표준 내보내기 형식을 지원하여 기존 3D 소프트웨어 생태계와 통합되므로 생성된 에셋이 3D 아티스트가 사용하는 인기 있는 도구와 호환됩니다. 이러한 호환성 중점은 기존 생산 파이프라인에 대한 중단을 최소화하므로 채택에 중요합니다.
"TRELLIS.2 파이프라인은 단일 2D 이미지에서 고품질 3D 에셋을 단 몇 초 만에 생성할 수 있습니다."
— NVIDIA 블로그
99% 속도 향상 수치는 매력적이지만, 독립적인 벤치마크는 아직 제공되지 않았습니다. 그러나 보고된 성능이 유지된다면 TRELLIS.2는 3D 콘텐츠 생성의 진입 장벽을 크게 낮추어 더 많은 AI 아티스트가 복잡한 3D 장면과 애니메이션을 실험할 수 있도록 할 수 있습니다. 이는 또한 에셋 생성의 경제학에 영향을 미쳐 광범위한 수동 노동 및 관련 비용의 필요성을 잠재적으로 줄일 수 있습니다. 기본 모델에 관심이 있는 크리에이터는 Charmloop의 모델 카탈로그를 탐색하여 다양한 AI 기능에 대한 통찰력을 얻을 수 있습니다.
3D 에셋의 빠른 생성은 독특하고 고품질의 3D 콘텐츠에 대한 수요가 끊임없이 증가하는 실시간 애플리케이션 및 대화형 경험에도 영향을 미칩니다. 온디맨드 방식으로 에셋을 생성하는 능력은 더욱 동적이고 개인화된 가상 환경으로 이어질 수 있습니다.
