iQIYI rekonstruiert verlorenen Film von 1938 mit KI-Plattform NadouPro

Rekonstruktion eines Films mit kaum Originalmaterial

Das restaurierte Werk Visiting Shanghai after Sixty Years entstand ursprünglich 1938 als Kurzfilm und wird von iQIYI als eines der frühesten Science-Fiction-Werke Chinas bezeichnet. Der Film stellte sich mit komödiantischen Mitteln das Leben 60 Jahre in der Zukunft vor. Seine Filmkopien, Filmrollen und Drehbücher gingen jedoch im Laufe der Jahrzehnte verloren.

Statt erhaltenes Filmmaterial zu reparieren, rekonstruierte das Team die Produktion von Grund auf. Als Referenzen dienten Produktionsfotos, Plakate und Zeitungsausschnitte. Der daraus entstandene Film umfasst zwei historische Zeiträume, 1938 und 1998, und mehrere Figuren, deren Erscheinungsbild von Einstellung zu Einstellung konsistent bleiben musste.

„Da keine Filmkopien erhalten sind, die restauriert werden könnten, haben wir KI genutzt, um den Film auf Grundlage der verfügbaren historischen Materialien kreativ zu rekonstruieren“, sagte Zidong JIANG, Mitglied des iQIYI-XMU Joint Laboratory und Director of AI Restoration Technology bei iQIYI.

NadouPro lieferte digitale Assets und Kamerasteuerung

Ein achtköpfiges Team des iQIYI-XMU Joint Laboratory of Film Restoration schloss das Projekt innerhalb von zwei Monaten ab. NadouPro diente als zentrale Produktionsplattform. Damit konnten die Filmemacher zunächst digitale Assets für jede Figur anlegen, bevor sie spätere Einstellungen generierten. Diese Assets erfassten Gesichtszüge, Proportionen und Kostüme und trugen dazu bei, das Erscheinungsbild der Figuren über mehrere Szenen hinweg zu bewahren.

Das Team nutzte außerdem NadouPros 3D Director Studio, um die Positionierung der Figuren, die Bildkomposition und Bewegungen zu steuern. Die Werkzeuge unterstützten die Arbeit an unterschiedlichen Szenen, visuellen Stilen und Kamerawinkeln und ermöglichten den Filmemachern eine direktere Kontrolle als eine Generierung nach dem Prinzip von Versuch und Irrtum.

Die Sequenzen von 1938 orientierten sich am frühen Schwarz-Weiß-Kino mit stabilen Kameras und einer Vintage-Beleuchtung. Die Sequenzen von 1998 verwendeten einen Dokumentarstil, natürliches Licht und Handkamera-Bewegungen.

„NadouPro hat uns dabei geholfen, von einer relativ zufälligen Bildgenerierung zu Einstellungen mit einer klaren Regieabsicht überzugehen“, sagte Enji YANG, der Regisseur des Films. Yang ergänzte, dass das Team mit Drehbuchanalyse, Figurengestaltung, Szenengestaltung und Storyboard-Planung begann, bevor es die audiovisuelle Gestaltung mithilfe von KI umsetzte.

Von der klassischen Restaurierung zur kreativen Rekonstruktion

iQIYI erforscht die KI-gestützte Filmrestaurierung seit 2017. Das firmeneigene ZoomAI nutzt Algorithmen zur Reparatur von Kratzern, für Super-Resolution, Rauschreduzierung und intelligente Zwischenbildberechnung. Über das gemeinsame Labor mit der Xiamen University hat das Unternehmen außerdem mehrere Klassiker in 4K wieder auf die Leinwand gebracht.

Das NadouPro-Projekt erweitert diese Arbeit über die Restaurierung beschädigten Filmmaterials hinaus. Es zeigt, wie iQIYI KI einsetzt, um verlorene Filme anhand der noch vorhandenen historischen Belege zu rekonstruieren, und dabei klassische Produktionsprozesse wie Planung, Figurengestaltung und Storyboarding beibehält.

Die Aufnahme in die Shortlist verschafft diesem Ansatz Anerkennung in der Branche und bei einem bedeutenden chinesischen Filmpreis. Aigong ZHANG, chief planner des Films und Direktor des iQIYI-XMU Joint Laboratory, bezeichnete ihn als „organische Verbindung traditioneller filmischer Handwerkskunst mit KI“. Für das Publikum bietet die Methode eine Möglichkeit, verlorene Werke in neu rekonstruierten Formen zu erleben. Die Quelle macht jedoch keine Angaben dazu, ob der Film breiter veröffentlicht werden soll.