In einem umgebauten ehemaligen Bahnhof nur Minuten vom Potsdamer Platz in Berlin entfernt hat Unity, der Hersteller der beliebten Spiele-Engine, kürzlich Hunderte Entwickler begrüßt. Die Veranstaltung bot Workshops zu Animation, maschinellem Lernen, World Building, Spielen und Filmen. Mitten unter den Demos zeigte sich das Gesicht einer jungen Frau, das von einer grinsenden Moderatorin gesteuert wurde.
Während der Keynote präsentierte Unity das neue Tool 'Facial AR Remote Component'. Auf einer Leinwand erschien eine junge Figur mit ausdruckslosem Gesicht. Die Moderatorin lächelte in ein iPhone X – und die Figur imitiert sie perfekt: Lächeln, Stirnrunzeln, Lippenbewegungen. Es fühlte sich an wie ein Pixar-Animoji.
(Oben: Unitys Facial AR Remote Component in Aktion. Bildnachweis: Unity)
Dieses Tool ist revolutionär, da die Aufnahmen nahtlos in Szenen integriert werden können – optimiert für Dialoge, Kinematografie und Mise-en-Scène, ohne teures Studio. 'Gesichtsanimationen sind extrem anspruchsvoll', erklärt Adam Myhill, Head of Cinematics bei Unity. 'Das Uncanny Valley ist ein echtes Problem. Unser Gehirn ist durch Hunderttausende Jahre Evolution darauf trainiert, Gesichter überall zu erkennen – sogar im Mond oder im Kartoffelbrei. Bewegen sie sich unnatürlich, wirkt es gruselig.'
Siehe auch: Someone remade that A-ha video for Augmented Reality | Die Zukunft von Augmented Reality liegt in der Avantgarde der 1930er Jahre | Kann die virtuelle Realität uns jemals so überraschen, wie es das frühe Kino tat?
'Mit einem Smartphone können Sie 50 bis 60 Prozent des Wegs zur perfekten Animation sofort zurücklegen. Das spart Budget und Zeit – ein Gamechanger. Für Projekte ohne höchste Ansprüche reicht es sogar direkt.'
Die Demo fing überlebensgroße Grimassen gut ein, doch bei subtilen Nuancen wie schelmischen Lächelnn oder hochgezogenen Brauen muss es sich noch beweisen. Für Myhill muss es nicht perfekt sein: 'Es gibt Animatoren ein solides Ausgangsmaterial. Stellen Sie sich vor, Schauspieler nehmen Zeilen mit Gesichts-Tracking auf. In der virtuellen Produktion können Kameras perfekt auf Ausdrücke justiert werden – das ist das nächste Level.'
"Wenn Hollywood nicht günstiger wird, versteinert es"
Die Kosten sind ein zentraler Treiber. Mit einem iPhone X überspringen Studios arbeitsintensive Mocap-Prozesse. Isabelle Riva, Leiterin von Made with Unity, sieht enormes Einsparpotenzial: 'Film braucht neue Technologien. Es ist extrem teuer – hauptsächlich durch Arbeitsaufwand. Echtzeit-Rendering halbiert das. Warum teuer für Inhalte zahlen? Hollywood muss aufwachen und billiger werden, sonst versteinert es.'
Augmented Reel-ality
Riva sieht Facial Mocap als Einstieg: AR verändert Postproduktion grundlegend. Regisseure erhalten Echtzeit-CG-Visuals, passen Performances spontan an – ohne stundenlange Neuanimationen. 'In zwei Jahren industrialisieren sich Pipelines durch AR und Echtzeit-Engines: Von fabrikartig zu spielerisch-nichtlinearen Produktionen.'
Unity-CEO John Riccitiello sagte kürzlich: 'Spielwelten werden wiederverwendbare Filmsets. Jemand baut eine Welt, lässt sie altern, dreht drei Filme und zehn Spiele darin – wie Gotham City für Neues.'
(Oben: AR-Projekte aus Unity. Quelle: Unity)
"Was ist eine Geschichte in einem AR-Raum, der ins Alltagsleben übergeht?"
Unity-Experten sind überzeugt: AR verschmilzt Spiele und Filme. Gesichtstracking beschleunigt nicht nur, sondern überlagert virtuelle Sets in reale Umgebungen. 'Es ergänzt traditionelle Produktion – Schritt eins', sagt Myhill. 'Parallel entsteht die Frage: Was ist Film? Geschichten in persistenten AR-Räumen, vermischt mit dem echten Leben. Wir teilen Welten mit Charakteren, Agenten und Story-Layern. Stellen Sie sich vor, nicht zuzuschauen, sondern mittendrin zu sein.'
Das klingt verlockend – abhängig vom Charakter.
Hauptbildkredit: Dan Taylor