얼굴 추적과 메쉬 변형 방법을 이용한 3차원 증강현실 성형 시뮬레이터

초록

본 논문에서는 일반 사용자가 자신의 얼굴의 형태를 3차원적으로 변형시켜볼 수 있도록 하는 증강현실 성형 시뮬레이터를 제안한다. 얼굴의 주요 특징을 추적, 정렬하고 이와 정합되어 있는 3차원 얼굴 모델을 영상에 피팅한 뒤, 피팅된 모델을 사용자 입력에 따라 메쉬 변형 방법으로 변형하여 영상 위에 렌더링함으로써 얼굴의 형태를 변형하여 보여줄 수 있다. 기존의 사진 편집 기반의 방법과 달리, 제안된 시뮬레이터를 통해 사용자가 3차원적으로 변형된 얼굴을 여러 시점에서 볼 수 있다.