Research project

3D Capturing of Faces

Als Unterprojekt des Teilprojekts C3 "Mobile Scanner" des Graduiertenkollegs "Heterogene Bildsysteme" hat sich die 3D-Erfassung von Gesichtern herausgebildet. Es geht dabei um Verfahren, mit denen in Echtzeit die Mimik von Gesichtern, basierend auf Tiefen- und/oder Farbvideos, erfasst werden kann. Zur Demonstration der Fähigkeiten dieser Echtzeit-Gesichtstracker wird die Übertragung der Mimik auf andere Personen demonstriert.

Project manager:
Prof. Dr. Günther Greiner, Prof. Dr.-Ing. Marc Stamminger, Theobalt, Christian

Project participants:
M.Sc. Justus Thies, Nießner, Matthias, Zollhöfer, Michael

Start: 1.1.2015

Sponsored by:
Deutsche Forschungsgemeinschaft

Publications

Thies, Justus ; Zollhöfer, Michael ; Stamminger, Marc ; Theobalt, Christian ; Nießner, Matthias: Demo of Face2Face: Real-time Face Capture and Reenactment of RGB Videos. In: ACM Siggraph (Org.) : ACM SIGGRAPH 2016 Emerging Technologies (SIGGRAPH '16 Anaheim, California). New York, NY, USA : ACM, 2016, pp 5:1-5:2.
[doi>10.1145/2929464.2929475]

Thies, Justus ; Zollhöfer, Michael ; Stamminger, Marc ; Theobalt, Christian ; Nießner, Matthias: Face2Face: Real-time Face Capture and Reenactment of RGB Videos. In: IEEE (Ed.) : Proc. Computer Vision and Pattern Recognition (CVPR) (CVPR 2016 Las Vegas). 2016, pp -.

Zollhöfer, Michael ; Thies, Justus ; Nießner, Matthias ; Stamminger, Marc ; Theobalt, Christian: FaceInCar: Real-time Dense Monocular Face Tracking of a Driver.Talk: National IT Summit 2016, MPI, Saarbrücken, 17.11.2016

Thies, Justus ; Zollhöfer, Michael ; Stamminger, Marc ; Theobalt, Christian ; Nießner, Matthias: FaceVR: Real-Time Facial Reenactment and Eye Gaze Control in Virtual Reality. In: arXiv.org. Cornell : Cornell University Library, 2016, pp 1-13.

Thies, Justus ; Zollhöfer, Michael ; Nießner, Matthias ; Valgaerts, Levi ; Stamminger, Marc ; Theobalt, Christian: Real-time Expression Transfer for Facial Reenactment. In: ACM (Org.) : ACM Transactions on Graphics (TOG) (Siggraph Asia 2015 Kobe, Japan). Vol. 34, 6. Edition 2015, pp -.