[Beauty Salon: Hair, Face, Lips, and Teeth] SPARK: Self-supervised Personalized Real-time Monocular Face Capture

https://arxiv.org/abs/2409.07984

SPARK: Self-supervised Personalized Real-time Monocular Face Capture

SPARK: Self-supervised Personalized Real-time Monocular Face Capture

1. 간단한 요약 및 소개

SPARK는 단일 카메라로 촬영한 동영상 데이터를 활용해 개인화된 고해상도 3D 얼굴 모델을 실시간으로 생성하는 새로운 접근 방식을 제안합니다. 기존의 3DMM 기반 방법론의 한계를 극복하며, 엔터테인먼트, AR/VR 등의 실시간 애플리케이션에서 활용 가능성이 큽니다.

---

2. 기존 문제점

• 복잡한 얼굴 데이터 처리: 기존 3DMM 기반 기술은 세밀한 표현을 다루기 어렵고 계산 비용이 큼.
• 데이터 의존성: 높은 품질의 결과를 얻으려면 대규모 학습 데이터가 필요.
• 실시간성 부족: 기존 기술은 고성능 장비를 필요로 하며, 실시간 처리에 한계가 있음.

---