EINSTEIN – digitaler Schauspieler

projects

Redaktioneller Hinweis: Folgender Artikel ist im Rahmen der Jubiläumspublikation „20 Years 20 Projects“ des Animationsinstituts entstanden. In dieser Festschrift zum 20-jährigen Bestehen des Instituts wurden 20 ikonische Projekte aus der bewegten und bewegenden Geschichte des Animationsinstituts vorgestellt. Den untenstehenden Artikel verfasste Technical-Directing-Alumnus Robin Reyer über das Projekt EINSTEIN.

 

Über Robin Reyer

 

Robin Reyer arbeitet derzeit als Computer Graphics Supervisor für die Moving Picture Company (MPC) in Adelaide, Australien. Nach seinem Informatikabschluss an der Hochschule der Medien (HdM) in Stuttgart studierte er von 2003 bis 2006 am Animationsinstitut der Filmakademie, wo er zum Technical Director (TD) ausgebildet wurde. Während des Studiums und darüber hinaus war er am Animationsinstitut in das Forschungsprojekt „Artificial Actors“ eingebunden. Nach Abschluss seines Studiums begann Robin für das Studio Framestore in London zu arbeiten, wo er an Projekten wie WHERE THE WILD THINGS ARE (Pipeline TD), AVATAR (Lead Pipeline TD), GRAVITY und THE SECRET LIFE OF WALTER MITTY (Lead Look Development und Lead Lighting TD) mitwirkte. Im Jahr 2018 wurde er zum „Head of Lighting and Look Development“ bei Rising Sun Pictures in Adelaide ernannt. Seit 2022 arbeitet er für MPC in Adelaide.

Über das Team von EINSTEIN

 

Volker Helzle (oben links) ist Leiter der Abteilung Research & Development (R&D) am Animationsinstitut der Filmakademie Baden-Württemberg. Nach seinem Abschluss an der Hochschule der Medien in Stuttgart im Jahr 2000 zog er nach Kalifornien und arbeitete bei Eyematic Interfaces. Seit 2003 ist er an der Filmakademie als R&D-Leiter, Senior Lecturer für den Studiengang Technical Directing und Programmberater bei der FMX tätig. Im Jahr 2013 erhielt Volker die Ehrenprofessur der Filmakademie. Volker war Executive Producer und Artistic Project Lead des Projekts DIGITAL ACTOR: ALBERT EINSTEIN. Digitale Schauspieler*innen sind seit der Gründung des Animationsinstituts ein Forschungsgegenstand. Zum Kernteam der Produktion der digitalen Albert-Einstein-Clips aus dem Jahr 2018 gehören Leszek Plichta (oben rechts, Modeling, Texturing), Angela Jedek (unten links, Animation) und Kai Götz (unten rechts, Projektmanagement, Shading, Lighting).

Die Toten auferwecken – Artikel von Robin Reyer

Das Projekt EINSTEIN (2017) des Research Labs vom Animationsinstiut ist eine beeindruckende Leistung! Schließlich ging es bei dem Projekt darum, die Möglichkeiten und Grenzen von digitalen Schauspieler*innen zu erforschen, die ausschließlich durch Kunst geschaffen werden. Kein leichtes Unterfangen. Ich selbst fühle einen starken Bezug zum EINSTEIN-Projekt, da ich vor etwa 15 Jahren ebenfalls an einem Projekt des Research Labs beteiligt war, bei dem es darum ging, digitale Menschen glaubhaft zu gestalten.

EINSTEIN: Smartphone

„Das sollte man nicht tun“ – das wurde uns gesagt, als wir mit unserem Projekt begannen und versuchten, die Rechte für das Filmmaterial zu erwerben, das wir für unser Vorhaben verwenden wollten. Um ganz offen zu sein, diese Aussage hallte lange nach und ich konnte sie nie ganz abschütteln. Wenn man versucht, eine verstorbene Person zu erschaffen, gibt es immer moralische Implikationen. Wir waren jedoch schon weit über diesen Scheideweg hinaus, und es gab kein Zurück mehr – die Finanzierung und das Team waren gesichert, die Zahnräder in Bewegung, keine Zweifel mehr.

 

Nicht einmal, wenn solch belastende Worte von jemandem kamen, der ein so bedeutendes Erbe mit dem Schauspieler teilte, den wir zu porträtieren geplant hatten. Obwohl wir fest entschlossen waren, das Vermächtnis des Schauspielers, seiner Familie und seines Nachlasses mit dem größtmöglichen Respekt zu behandeln, blieb dieser Satz in meinem Hinterkopf und sorgte für unangenehme kleine Schauer des Zweifels. Wie bei allem, was wir schaffen, wollten wir nicht enttäuschen – nicht nur uns selbst, sondern vor allem wollten wir es auch den Skeptikern zeigen. Vielleicht, so hofften wir, würden wir all jenen, die an der praktischen und moralischen Machbarkeit zweifelten, beweisen, dass wir es mit Talent und Respekt schaffen würden. Dennoch – um noch offener zu sein – war ich zu einem bestimmten Zeitpunkt davon überzeugt, dass wir dem Untergang geweiht waren.

Vielleicht, so hofften wir, würden wir all jenen, die an der praktischen und moralischen Machbarkeit zweifelten, beweisen, dass wir es mit Talent und Respekt schaffen würden.

Robin Reyer, Alumnus Technical Directing

Ich hoffe, dass die Menschen, die an diesen fantasievollen und neuen Kreationen mit einem digitalen Einstein beteiligt waren, nicht von ähnlichen Zweifeln geplagt wurden. Eines hat sich bei beiden Projekten bewahrheitet, und ich glaube, das gilt auch heute noch: Digitale Menschen sind, trotz aller Fortschritte, nach wie vor sehr schwer zu kreieren – über ihre Herkunft hinwegzutäuschen ist eine große Herausforderung. Die Sache ist die, dass wir alles über unsere Mitmenschen wissen. Ihre Freuden und Ängste, Wahrheiten und Lügen; alles liegt unserem Gegenüber offen ins Gesicht geschrieben. Millionen von Jahren evolutionärer Programmierung haben dafür gesorgt, dass wir uns gegenseitig lesen können. Diese Vertrautheit, diese unsichtbare und unbeschreibliche Hürde zu überwinden, das ist die eigentliche Schwierigkeit bei der Schaffung digitaler Menschen.

 

EINSTEIN: Human Being

Als ich sagte, dass unser Projekt damals zum Scheitern verurteilt war, habe ich zum Teil gescherzt. Ich glaube, ich wollte mir damit einen Raum schaffen, in dem der ganze Prozess für mich weniger ernst und weniger zum Scheitern verurteilt erschien. Zu dieser Zeit, etwa 2006 oder 2007, gab es nicht viele gute Beispiele für digitale Menschen, die den Lackmustest bestanden und den Uncanny-Valley-Effekt überwunden haben, der tief, dunkel und nicht bezwingbar erscheint, wenn man an seinem Abgrund steht.

 

Es gab THE SCORPION KING, die MATRIX-Digi-Doubles, Lemony Snickets SUNNY BAUDELAIRE – einige mehr oder weniger erfolgreiche Beispiele, die mit weitaus mehr Fachwissen und Geld umgesetzt wurden, als die Projekte des Research Labs zur Verfügung hatten. Als Erinnerung: DER SELTSAME FALL DES BENJAMIN BUTTON war noch ein Jahr entfernt. Vielleicht stellen wir uns bei dem Versuch, digitale Menschen zu erschaffen, unbewusst auf ein gewisses Maß an Misserfolg ein? Aber andererseits scheinen die Fallen, die wir uns selbst stellen, noch nie jemanden von irgendetwas abgehalten zu haben.

Digitale Menschen waren und sind wohl immer noch der heilige Gral der visuellen Effekte.

Robin Reyer, Alumnus Technical Directing

Digitale Menschen waren und sind wohl immer noch der heilige Gral der visuellen Effekte. Digitale Menschen sind bekanntermaßen schwer zu erschaffen und noch schwerer ist es, sie überzeugend zu machen. Je nachdem, was man erreichen will, kann man einige Tricks anwenden, wie z. B. die digitalen Darsteller*innen nicht reden zu lassen oder die Einstellung möglichst kurz und die Kamera beschäftigt zu halten, um den Zuschauern erst gar nicht die Möglichkeit zu geben, die Kreation zu lange zu analysieren. In den EINSTEIN-Kurzfilmen wird nichts von alledem angewandt. Das Team hat sich für einen bestimmten Weg entschieden und sich nicht erlaubt, einen dieser Tricks anzuwenden. Genau wie bei dem Projekt, an dem ich vor langer Zeit beteiligt war, wählten sie einen Weg, der ihnen vertraut war und der zu den kollektiven Fähigkeiten passte, aber dennoch die Grenzen des Bekannten überschritt.

 

Wenn man sich für einen rein künstlerischen Ansatz entscheidet, besteht die Aufgabe darin, die Grenzen dessen zu testen, was mit den vorhandenen Fähigkeiten und Tools möglich ist. EINSTEIN nutzte auch eine Eigenentwicklung des Forschungsprojekts, das „Adaptable Facial Setup“, um die Gesichtsanimation zu steuern. Beide Projekte begannen mit einer lebensgroßen Silikonbüste, einer buchstäblichen, echten Silikonbüste, die sich unweigerlich in eine bildliche Büste verwandeln sollte. Bei keinem der beiden Projekte ging es im Wesentlichen um die Erfassung von Leistungen oder um die Nachbildung eines Abbilds auf der Grundlage von Messungen. In beiden Fällen ging es darum auszuprobieren, was aus der Perspektive eines Künstlers ohne die von der realen Welt auferlegten Restriktionen möglich ist. Schließlich wurde hier ein Narrativ erfunden, eine Vorstellung davon, wie Einstein mit achtzig oder neunzig Jahren aussehen könnte. Das alles wurde erfunden! Es musste ein bekannter und doch unbekannter Einstein erfunden werden. Das EINSTEIN-Team hat es gewagt, einen Ausdruck von Albert zu erträumen, und hat etwas geschaffen, das ich mir immer wieder gerne ansehe – und hoffentlich werden alle Skeptiker zustimmen.

Heute, fünfzehn Jahre nach dem Projekt, an dem ich beteiligt war, hat sich Einiges verändert. Mit dem Aufkommen des maschinellen Lernens bei visuellen Effekten ist die Hoffnung, den Uncanny-Valley-Effekt zu überwinden, größer denn je, die Hürden scheinen niedriger zu sein. Was früher sehr schwer zu erreichen war, die Schaffung eines glaubwürdigen digitalen Menschen, ist jetzt leichter zu bewerkstelligen. In meiner bisherigen Laufbahn habe ich Deepfakes gesehen, bei denen die Gesichter von Schauspieler*innen auf Stunt-Doubles gelegt wurden, einschließlich einer Leistungsebene, und ich war verblüfft von der Qualität und dem Grad der Täuschung. Es ist immer noch harte Arbeit und erfordert Geschick, Leidenschaft und Entschlossenheit, allerdings bin ich mir nicht sicher, wie viel Spaß es heutzutage macht, all dies zu schaffen.

 

Maschinelles Lernen ist so etwas wie eine Blackbox und erfordert eine Menge Training und überwachtes Lernen. Die kreativen Werkzeuge, die uns zur Verfügung stehen, haben sich verändert, und das hat es uns ermöglicht, die Glaubwürdigkeit digitaler Menschen in nie dagewesenem Maße zu verbessern. In den kommenden Jahren werden sich immer weniger Menschen daran erinnern, wie schwer es anfangs war, unsere (echten) Mitmenschen zu täuschen.

Das Animationsinstitut ist ein wundersamer Ort. Die Tatsache, dass diese beiden Projekte dort entstanden sind, zeugt von der Neugierde und der schieren Furchtlosigkeit, die dieser Ort hervorruft. Ich bin unendlich dankbar dafür, dass ich die Gelegenheit hatte, dort Technical Directing zu studieren, an den Projekten meiner Kommilitonen und Kommilitoninnen mitzuwirken, in die Gedanken und das Handwerk der anderen einzutauchen und mir wertvolle Fähigkeiten und Wissen anzueignen. Die kreativen Möglichkeiten, die dieser Ort bietet, die Freundschaften, die dort durch gegenseitige Vertrauensvorschüsse, harte Arbeit und Entschlossenheit entstehen, das alles bleibt einem ein Leben lang erhalten.

 

Ich glaube, dass EINSTEIN ein Ausdruck davon ist. Auch wenn es sich nicht um ein Studierendenprojekt im klassischen Sinne handelt, so glaube ich doch, dass es in einem ähnlichen Geist entstanden ist, im Rahmen reiner und unverfälschter Möglichkeiten. Am Ende hat mir meine Zeit dort die Grundlagen gegeben, die ich brauchte, um meine Reise durch die Branche der visuellen Effekte zu beginnen – eine Reise, die noch andauert und für die meine Leidenschaft ungebremst ist.

 

Hier findest Du alle EINSTEIN-Episoden zum Anschauen.

 

Beitrag teilen