Eigentlich ist das TrueDepth-Kamerasystem von Apples iPhone X dafür gedacht, zuverlässig Gesichter per Face ID zu erkennen und Animojis zu animieren - jetzt hat Reallusion eine Smartphone App samt Desktop-Software vorgestellt, die dessen Fähigkeiten nutzt, um live Motioncapturing von Gesichtern zu ermöglichen.
Um sicher Gesichter zu identifizieren, projiziert das TrueDepth-Kamerasystem des iPhone X per Infrarot 30.000 Punkte auf ein Gesicht, nimmt diese per IR-Kamera auf und errechnet aus der Deformation des Musters durch die Form des Gesichts ein ziemlich detailliertes 3D-Modell des Gesichts. Dieses 3D-Modell ist bei der Identifizierung per Face ID wesentlich schwieriger zu umgehen als ein simples 2D-Bild eines Gesichts. Aber natürlich können diese 3D Daten auch zu anderen Zwecken genutzt werden, z.B. zum Face-Motioncapturing und so zur Animation von virtuellen Gesichtern.
Schon seit Juli bietet Reallusion mittels seiner LIVE FACE App die Möglichkeit, live die Gesichts-Trackingdaten eines iPhones X über Wifi zu einem Computer zu senden und dort ein Gesicht zu animieren. Neu ist jetzt die relativ preisgünstige Kombination von Face-Motioncapturing per LIVE FACE und dem Ganzkörper-Motioncapturing-System Motion LIVE (ebenfalls von Reallusion), welches die Live-3D-Gesichtsdaten von LIVE FACE verarbeiten und zu einem vollständigen Motoincapturing samt Gesicht zusammenfügen kann.
Die LIVE FACE App ist kostewnlos, das zur Nutzung der Capturingdaten in Motion LIVE notwendige Profil kostet rund 300 Dollar, Motion LIVE selbst 100 Dollar, die passende 3D- Animationssoftware iClone 7 rund 150 Dollar - dazu gibt es kostenpflichtige Profile für verschiedene Motioncapturing Systeme wie etwa Leap Motion, OptiTrack oder Xsens.
