News: Move.ai - filmreifes Motion Capture ohne Tracker mit nur zwei iPhones?

Move.ai Motion Capturing am iPhone

Die Aufnahmen der verknüpften Geräte werden danach zum Move.ai Onlinedienst hochgeladen, also in der Cloud verarbeitet (genutzt wird AWS). Die fertigen Skeletons bzw. Tracking-Daten sind kompatibel mit einer Vielzahl Programme, aktuell Maya, MotionBuilder, Blender, Cinema4D, Unreal Engine, Unity und Houdini. Ausgegeben werden FBX- (Pre-/Retargeted), Blender- oder Maya HIK-Dateien. Auch die Fingerpositionen lassen sich tracken, laut Move.ai mit ca. 70% Trefferquote, während das Körpertracking zu 90% akkurat ausfällt.

Die MoCap-Aufnahme-Aufnahme läßt sich sehr einfach durchführen. Die filmenden iPhones müssen lediglich auf Stativen o.ä. befestigt sein und die zu trackende Person immer komplett im Bild haben. Je mehr Kameras verwendet werden, umso genauer kann getrackt werden, da sich Occlusionen (Überdeckungen) besser ausgleichen lassen. Es empfiehlt sich, bei der Wahl der Kleidung auf ausreichend Kontrast zum Hintergrund zu achten (allerdings ist schwarz ungünstig), auch sollte sie eher eng sein, siehe Help-Dokumente.

Vor der Aufnahme muss eine Kalibrierung vorgenommen werden und auch zu Beginn jedes Takes müssen die Personen im Bild einige vordefinierte Aktionen machen, damit das Tracking funktioniert (in die Hände klatschen für den Sync und dann 2s mit den Armen in T-Positon stehen). Aktuell lassen sich mit Move.ai nur Menschen tracken (keine Tiere); an Objekten werden ferner nur (Fuss-)Bälle erkannt.

Als Webservice steht Move.ai bereits seit ein paar Jahren zur Verfügung, neu ist nun die iPhone-App - unterstützt werden die Modelle iPhone 8 - 14 mit iOS 16+. Wie der Name schon verrät, basiert die Anwendung auf KI-Algorithmen bzw. eine Kombination aus Maschinensehen und Deep Learning. So läßt sich auf umständliche MoCap-Workflows mit Tracking-Suits uä. verzichten.

Wer sich bei Move.ai anmeldet, bekommt zwei Gratis-Minuten Motion Capturing geschenkt, daher läßt sich das Tracking kostenlos ausprobieren. Nach Ablauf der Freiminuten kostet das Verarbeiten der Capturings 365 Dollar für 12 Monate. Allerdings gibt es keine MoCap-Flatrate, sondern wer mehr als 30 Minuten per Monat (oder 6 Stunden pro 6 Monate) verarbeiten möchte, muss zusätzlich 4 Cent pro Minute bezahlen.