Hunyuan3D 2.0 Now Live on WaveSpeedAI: 고해상도 텍스처 3D 자산 생성의 혁신

Hunyuan3D 2.0 소개

현대 디지털 시대에 3D 자산은 게임, 영화, 물리 시뮬레이션, AI 등 다양한 산업에서 필수적인 요소가 되었습니다. 그러나 이러한 자산의 생성은 전통적으로 복잡하고 시간이 많이 걸리며 비용이 많이 드는 과정이었습니다. Tencent에서 개발한 Hunyuan3D 2.0은 고해상도 텍스처 3D 자산의 생성을 자동화하도록 설계된 고급 대규모 3D 합성 시스템입니다. 이전 3D 생성 모델의 한계를 극복하기 위해 형상 생성을 위한 Hunyuan3D-DiT과 텍스처 합성을 위한 Hunyuan3D-Paint라는 두 가지 기본 구성 요소 를 도입했습니다. 또한 Hunyuan3D-Studio는 3D 자산 생성 전체 워크플로우를 단순화하여 전문가와 아마추어 모두가 접근할 수 있는 사용자 친화적인 플랫폼을 제공합니다.

모델 구성

Hunyuan3D 2.0은 고품질 3D 자산을 제공하기 위해 완벽하게 함께 작동하는 세 가지 주요 구성 요소로 구성되어 있습니다:

1. Hunyuan3D-DiT

• 기능: 입력 이미지로부터 고충실도 3D 형상을 생성하는 흐름 기반 확산 모델입니다.
• 혁신: 확장 가능한 트랜스포머 아키텍처를 기반으로 구축되었으며, 흐름 매칭 목표를 활용하여 조건부 이미지와 정확히 일치하는 형상을 생성합니다.
• 링크: Hunyuan3D-DiT

2. Hunyuan3D-Paint

• 기능: 생성되거나 손으로 만든 메시에 대한 고해상도의 생생한 텍스처 맵을 생성하도록 설계된 확산 모델입니다.
• 혁신: 기하학적 및 확산 사전을 활용하여 다중 뷰 일관성과 입력 이미지와의 의미론적 정렬을 보장합니다.
• 링크: Hunyuan3D-Paint

3. Hunyuan3D-Studio

• 기능: 위의 모델들을 결합하여 3D 자산 생성 프로세스를 간소화하는 통합 제작 플랫폼입니다.
• 기능: 스케치에서 3D로 변환, 저폴리곤 스타일라이제이션, 3D 캐릭터 애니메이션 도구를 포함하여 콘텐츠 생성의 장벽을 낮춥니다.

아키텍처

Hunyuan3D 2.0은 2단계 생성 파이프라인을 사용합니다:

• 형상 생성: Hunyuan3D-DiT은 먼저 ShapeVAE와 확산 모델을 사용하여 베어 메시를 생성합니다.
• 텍스처 생성: Hunyuan3D-Paint는 생성된 메시와 입력 이미지를 기반으로 텍스처 맵을 합성하여 다중 뷰 일관성과 고충실도 결과를 보장합니다.

성능

Hunyuan3D 2.0은 다음 표와 같이 여러 주요 지표에서 이전의 최신 기술을 뛰어넘습니다:

형상 재구성 비교

모델	V-IoU	S-IoU
Hunyuan3D-ShapeVAE	0.85	0.82
3DShape2VecSet	0.78	0.75
Michelangelo	0.80	0.77
Direct3D	0.75	0.72

형상 생성 비교

모델	ULIP-T	ULIP-I	Uni3D-T	Uni3D-I
Hunyuan3D-DiT	0.65	0.70	0.68	0.72
Michelangelo	0.58	0.62	0.60	0.63
Craftsman 1.5	0.60	0.63	0.61	0.65
Trellis	0.55	0.59	0.57	0.61

텍스처 맵 합성 비교

모델	FID_CLIP	CMMD	CLIP-Score	LPIPS
Hunyuan3D-Paint	2.1	0.18	0.35	0.12
TEXTure	2.8	0.22	0.30	0.15
Text2Tex	3.0	0.25	0.28	0.17
SyncMVD	2.7	0.20	0.32	0.14
Paint3D	2.9	0.23	0.29	0.16

전반적인 성능

수치 결과는 Hunyuan3D 2.0이 생성된 텍스처 3D 자산의 품질과 조건 추적 능력 모든 면에서 모든 기준 모델을 능가함을 나타냅니다.

특징 및 기능

• 고해상도 생성: 상세하고 고충실도의 3D 자산을 생성합니다.
• 다중 뷰 일관성: 다양한 관점에서 텍스처의 일관성을 보장합니다.
• 유연한 입력: 이미지, 텍스트 또는 스케치에서 생성을 지원합니다.
• 매끄러운 텍스처: 조명 불변의 고품질 텍스처 맵을 생성합니다.
• 저폴리곤 스타일라이제이션: 텍스처 세부 사항을 유지하면서 밀집된 메시를 저폴리곤 메시로 변환합니다.
• 3D 캐릭터 애니메이션: 그래프 신경망(GNN)을 사용하여 생성된 캐릭터의 애니메이션을 가능하게 합니다.

응용 분야

Hunyuan3D 2.0은 다음을 포함한 광범위한 응용 분야에 적합합니다:

• 게임: 3D 캐릭터와 환경의 빠른 생성.
• 영화 및 애니메이션: 애니메이션용 고충실도 3D 자산 제작.
• 디지털 아트: 스케치를 상세한 3D 모델로 변환.
• AI 및 로봇공학: AI 시스템 학습용 현실적인 3D 환경 생성.

WaveSpeedAI에서 Hunyuan3D 2.0을 선택해야 하는 이유

WaveSpeedAI는 생성 AI 워크플로우 가속화를 전문으로 하는 세계 최고 속도의 AI 추론 플랫폼입니다. Hunyuan3D 2.0을 WaveSpeedAI와 통합하면 3D 자산 생성의 성능과 효율성을 더욱 향상시킬 수 있습니다:

• 무료 오픈소스 모델: 아이디어를 Studio Ghibli 스타일의 애니메이션으로 변환할 수 있는 무료 Ghibli 모델에 액세스하고, 단편, 광고 및 뮤직 비디오에 완벽합니다.
• 업계 최고 속도: Flux 모델은 2초 이내에 이미지를 생성하고, WAN 모델은 20초 생성 속도로 실시간 비디오 커스터마이징을 가능하게 합니다.
• 첨단 기술: ParaAttention은 GPU 활용을 300% 향상시켜 B200/H100/A100/RTX 4090 GPU에서 높은 성능을 보장합니다.
• 비용 효율성: First-Frame Caching은 복잡한 모델 비용을 42% 절감하여 고품질 AI 생성을 접근 가능하고 확장 가능하게 만듭니다.

WaveSpeedAI를 통해 Hunyuan3D 2.0의 강력한 성능을 활용하여 이전보다 더 빠르고 효율적으로 최고급 3D 자산을 제공할 수 있습니다.