DeformSplat, 한 장의 사진으로 3D 캐릭터 애니메이션
컴퓨터 그래픽 연구가 DeformSplat이라는 혁신적인 방법으로 발전하고 있습니다. 이 기술은 정적인 이미지 하나만으로 캐릭터의 완전한 3D 모델을 구축하고 애니메이션화할 수 있게 합니다. 가장 큰 성과는 애니메이션 과정 내내 원본 비율을 보존한다는 점으로, 다른 시스템들은 이를 잘 이루지 못했습니다 🎯.
기술적 기반: 3D 가우시안과 신경망
이 시스템은 전통적인 폴리곤 메시를 구축하지 않습니다. 대신 3D 탄성 입자 집합, 즉 "splats"로 주제를 표현합니다. 이 입자들은 3D 가우시안 표현을 기반으로 합니다. 핵심 차별점은 관절 변형을 정확하게 예측하도록 훈련된 특화된 신경망입니다. 이를 통해 단일 카메라 각도에서 추론된 모델이 설득력 있게 움직이고 포즈를 취할 수 있습니다. 신경망은 텍스처와 기하학을 그대로 유지하면서 가우시안을 변형하는 법을 배워 캐릭터의 외관을 보장합니다.
접근 방식의 주요 장점:- 단일 뷰에서 애니메이션 가능한 3D 모델 생성, 여러 사진이나 비디오 불필요.
- 신경망이 모든 뷰포인트에서 시각적 일관성을 유지하며 변형 처리.
- 복잡한 움직임 중에도 원본 캐릭터의 비율과 세부 사항 보존.
DeformSplat은 여러 뷰 캡처 필요성을 제거하여 워크플로를 단순화하고 새로운 응용 분야를 열어줍니다.
이전 방법들 초월
여러 캡처나 비디오 시퀀스가 필요한 기존 기술에 비해 DeformSplat은 훨씬 더 직접적인 프로세스를 제공합니다. 결과는 다양한 포즈와 의류 유형을 효과적으로 처리하며 부드러운 애니메이션을 생성한다는 것을 보여줍니다. 캐릭터가 정교한 움직임을 할 때 시각적 아티팩트가 적고, 안정적이고 사실적인 외관을 유지합니다.
잠재적 응용 분야:- 일러스트나 참조 사진으로부터 개념 또는 캐릭터의 빠른 애니메이션.
- 입력 데이터 감소로 디지털 더블 생성을 위한 VFX 파이프라인 통합.
- 역사적 또는 가족 사진을 새롭게 생동감 있게 만드는 창의적 도구.
접근 가능한 애니메이션의 미래
이 발전은 어떤 사진이든 사실적으로 애니메이션화할 가능성을 가까이 가져옵니다. 상상해보세요, 다음과 같이 할 수 있게 되는 거예요