Gaussian Head Avatar : 3D 아바타 생성 모델

사실적인 3D 아바타를 생성하는 모델

 

Gaussian Head Avatar는 사실적인 3D 아바타를 생성하는 모델입니다.

 

Gaussian Splatting을 이용해 적은 데이터만으로도 2K 해상도의 제어 가능한 표정으로 현실적인 얼굴 아바타를 만들 수 있다고 하죠. 아무래도 몸 전체 대비 얼굴 부분은 움직임의 폭이 작기 때문에 유리한 측면이 있겠지만 한편으론 개별 사람의 특징이 한곳에  모여있는 곳이기도 하다보니 어중간한 품질로 했다가는 티가 나기 십상입니다.

 

Gaussian Head Avatar는 이런 문제를 해결한 아주 사실적이고 세밀한 표현까지 지원하는 얼굴 아바타를 생성할 수 있도록 해 줍니다. 제어 가능한 3D 가우스 스플래팅을 이용해 아바타 얼굴 모양을 만들고, 동적인 표현을 모델링하기 위해 MLP 기반의 표현 조건부 변형 필드를 도입했으며, 안정적인 훈련/수렴을 위해 기하학적 가이드 초기화 전략을 개발했다고 합니다.

 

사진 : Gaussian Head Avatar 모델 개요

 

 

참고) 프로젝트, 논문, 코드, 영상