Neue Live Link Face App macht Gebrauch von Apples ARKit

Motion Capture ist eines der wichtigsten Elemente für die realistische Übernahme von Bewegungen innerhalb von Filmen und Videospielen. Seit mehreren Dekaden existiert nun die rohe Technologie und revolutionierte die Art, mit der CGI Modelle animieren und lebensecht wirken lassen kann. Facial Capture ist ein Ableger dieser Technologie und ist besonders in Zeiten von Konsolen und Filmen, welche nahezu hyperrealistische Animationen emulieren kann, immer wichtiger geworden. Selbst die kleinsten Mimiken sagen viel über die Gefühle und Zustände eines Charakters aus, weshalb viel in die nahtlose Simulation jener investiert worden ist - trotzdem ist jene ohne ein gigantisches, teures Setup schwer umzusetzen. Gegen dieses Stigma der Industrie will Epic Games, Publisher von weltweiten Hits wie Fortnite und Ersteller des gleichnamigen Epic Games Stores, nun mit einer neuen App vorgehen - die sogenannte Live Link Face App ist ab sofort für iOS und iPadOS verfügbar und bietet überraschend fortgeschrittene Features.

iOS und iPadOS stellen in diesem Fall die perfekten Plattformen für das Vorhaben von Epic Games dar, denn neben der TrueDepth Kamera macht der Entwickler ebenfalls Nutzen von Apples ARKit, welches das Unternehmen für fortgeschrittene Geräte entwickelt hat um die Sensoren der Kamera für Echtzeit-Aufnahmen von Gesichtern und Räumen zu verbessern. In Tandem hiermit benutzt die App die Unreal Engine, eine der industrieweit am meisten genutzten und beliebtesten Engines, um in Echtzeit Animationen für Modelle über dem eigenen Gesicht zu erzeugen. Der offizielle Blog Post, in dem Epic Games die neue App ankündigte, geht mehr ins Detail wie die Live Link Face App funktioniert:

"Live Link Face streamt hochqualitative Gesichtsanimation in Echtzeit von deinem iPhone direkt auf Charaktere in der Unreal Engine. Die Tracking-Fähigkeiten der App stammen von Apples ARKit und der vorderen TrueDepth Kamera des iPhones, welche interaktives Tracking des Gesicht des Nutzers ermöglicht und die Daten direkt an die Unreal Engine über das native Netzwerk übermittelt. [...] Die App liefert expressive und ausdrucksvolle Gesichtsaufnahmen in jeglichem Szenario der Produktion und wurde speziell gestaltet, um sowohl beim professionellen Aufnehmen mit mehreren Darstellern in voller Bewegung, als auch am Schreibtisch eines einzelnen Designers exzellente Ergebnisse zu liefern."

Live Link Face ist ab sofort sowohl für iPhone als auch iPad kostenlos im Store erhältlich.