FaceChain : 나만의 프로필 사진을 만들 수 있는 모델

최소한의 인물 사진으로 나만의 디지털 트윈을 만들고 원하는 설정을 적용한 개인 사진을 생성할 수 있는 툴 체인

 

FaceChain은 최소 1장 (최대 3장)의 인물사진으로 나만의 디지털 트윈을 만들고 다양한 설정을 적용한 개인 인물사진을 생성할 수 있도록 해 주는 툴 체인입니다. 네이버나 카카오에서 프로필 사진을 생성하는 유료 서비스를 제공하고 있는데 이와 유사한 역할을 한다고 생각하면 될 것 같습니다. 

 

이 툴 체인의 아키텍처를 보면 아시겠지만, 사용되는 모델들이 상당히 많으며 복잡한 처리 과정을 거칩니다. 모델로는 DamoFD (얼굴인식), 이미지 회전모델, M2FP (인간구문 분석모델), ABPN (피부 리터칭 모델), FairFace (얼굴 속성 인식모델), DeepDanbooru 모델, FQA(얼굴 품질 평가), 얼굴 융합모델, RTS(얼굴 인식 모델) 등이 사용되며 이것들이 유기적으로 연계되어 동작하도록 되어 있습니다.

 

FaceChain은 ModelScope의 노트북이나 Docker, Conda 가상환경, Colab 등을 지원하니 실행해 보려고 할 때 개발자가 편한 것을 취사선택할 수 있습니다.

 

사진: FaceChain의 아키텍처

 

 

참고) 논문, 깃헙, 영상

• 깃헙 상에서는 제공하는 모델을 구동하기 위해 VRAM 19GB, 디스크 50GB가 요구사항으로 명시되어 있습니다.