Mit einer Investition von 35 Milliarden US-Dollar verbünden sich die südkoreanischen Konzerne mit Silicon Valley. Wird ein "Pixar" der künstlichen Intelligenz plötzlich geboren?

Wenn ich Sie frage, was Ihnen als erstes in den Sinn kommt, wenn Sie an die Generierung von Filmen durch KI-Videos denken, was wäre es?

Manche sagen, es wäre Sora2.

Manche sagen, die Filmindustrie stehe am Ende und die Jobs von Filmemachern seien bedroht...

Aber wenn ich Ihnen sage, dass diese Plattformen nicht wirklich mit der eigentlichen Inhaltserstellung in der Filmindustrie konkurrieren, würden Sie mir glauben?

Die echte Bedrohung für das industrielle System der Filmerstellung ist nicht die täglich von Ihnen gescrollte AIGC auf Kurzformatvideos, sondern eine stillere, “regieähnliche” KI-Erstellungsplattform: Sie erzeugt keine abenteuerlichen Videos, sondern “filmfähige Welten”.

Machen wir einen einfachen Abriss anhand der Kernbestandteile eines Films und sehen uns an, was für Grundvoraussetzungen es zum Filmen eines Films gibt:

✔ Charakterkonstanz

✔ Kontinuierliche Handlung

✔ Wiederholbare Aufnahmen und Bearbeitbarkeit

✔ Kameraführung: Bildgröße, Licht, Brennweite

✔ Wiederverwendung von Objekten und Szenen

✔ Komplexe Bewegungslogik: Laufen, Kämpfen, räumliche Abdeckung

✔ Stabile physikalische Gesetze: Schwerkraft, Wind, Licht- und Schattenkonstanz

Offensichtlich ist die Fähigkeit der gegenwärtigen AIGC nicht ausreichend, um einen Film zu erstellen. Ob es um die Kontinuität, die Konstanz oder die Einhaltung der Gesetze der realen Welt geht, die Umsetzung komplexer Logiken oder sogar die Konsistenz des Hauptcharakters: Es besteht die Möglichkeit, dass diese Aspekte nicht in einem hohen Maßstab aufrechterhalten werden können... Der gleiche Hauptcharakter am Anfang und am Ende des Videos kann eher wie ein Bruder oder ein Vettern aussehen.

Ganz zu schweigen von den seltsamen Details, die durch die illusionsprägen der KI-Systeme verursacht werden und schwer zu beseitigen sind.

Also sind KI-Plattformen auf Filmebene und gewöhnliche Verbraucher-KI-Videoerstellungssysteme zwei völlig verschiedene Arten von Dingen.

Wie sieht aus einer KI-Plattform aus, die möglicherweise zu einer echten Filmplattform entwickelt werden kann?

In letzter Zeit ist in Hollywood eine große Neuigkeit aufgetaucht: Das in Los Angeles gegründete KI-Startup Utopai Studios und das globale Technologieunternehmen Stock Farm Road suchen eine Partnerschaft.

△ Die Hollywood-Medien haben bereits auf diese potenziell branchenverändernde Partnerschaft aufmerksam geworden.

Beide Parteien planen, ein Joint Venture namens Utopai Studios East zu gründen. Unter Nutzung der KI-Technologie von Utopai und der Infrastruktur sowie des Kapitalreserven von Stock Farm Road soll eine echte Film-KI-Plattform geschaffen werden.

Eine einfache Analyse des klaren und umsetzbaren Technologiepfads dieses neuen Unternehmens sowie des Infrastrukturplans im Wert von Hunderten von Milliarden US-Dollar zeigt, dass dieses Projekt nicht nur leeres Gerede ist.

1995 hat Pixar den ersten CG-Animationsfilm “Toy Story” gedreht. Die erste Firma, die einen echten KI-Film dreht, existiert noch nicht. Utopai Studios East könnte ein starker Kandidat sein.

△ Alle warten auf die Entstehung der KI-Version von Pixar.

Da die derzeit weltweite AIGC-Welle nicht der “richtige Weg” für die Filmkreation ist, wollen wir uns heute anschauen, wie der richtige Weg für die filmische KI aussehen sollte.

01 Südkoreanische Finanzkonzerne + Silicon Valley-Eliten: Die Hintermänner von Utopai East aufgedeckt

Die Investoren von Utopai East sind Stock Farm Road (SFR) und das KI-Filmerstellungsunternehmen Utopai Studios, die jeweils 50 % der Anteile halten.

Einer der Investoren, SFR, verfügt über enorme finanzielle Mittel. Einer der Gründer ist der Enkel von Koo In-Hwoi, dem Gründer der LG-Gruppe und der Gruppeninhaber Brian Koo, der andere ist der Gründer, Vorsitzende und CEO der Offsets Group aus dem Nahen Osten, Amin Badr-El-Din.

Als reicher Investor bietet SFR dem Joint Venture Kapital, kreative Fachkenntnisse und Branchenkontakte, sodass hinter dem Joint Venture die Worte “kein Geldproblem” stehen.

△ Der Gründer von Stock Farm Road ist der Enkel von Koo In-Hwoi, dem Gründer der LG-Gruppe, Brian Koo.

Der andere Investor ist das KI-ursprüngliche Filmstudio Utopai Studios, das dem Joint Venture Technologie, Arbeitsabläufe und Infrastruktur zur Verfügung stellt.

Utopai Studios war ursprünglich das 2022 in Los Angeles gegründete KI-Videoerstellungsunternehmen Cybever, das von zwei ehemaligen Google-Mitarbeitern gegründet wurde. Früher konzentrierte sich die Firma auf die Entwicklung von KI-Werkzeugen zur Erstellung komplexer 3D-Umgebungen und auf die Technologie der 3D-Weltgenerierung (AI 3D world).

△ Die beiden Mitgründer von Utopai Studios, Cecilia Shen und Jie Yang.

Später stellte die Firma fest, dass es in der Medienbranche ein breites Anwendungspotenzial für die industrielle Videoerstellung mit KI-Unterstützung gibt. Daher wechselte sie ihren Namen in Utopai Studios und transformierte sich zu einem Film- und Fernsehstudio, das sich auf Hollywood, das Zentrum der Medienbranche, spezialisiert.

Als eines der ersten Hollywood-Film- und Fernsehstudios, das auf KI-Technologie aufbaut und vollständig damit betrieben wird, ist Utopai Studios auch das erste KI-Unternehmen, das der Hollywood-Gewerkschaft beigetreten ist. Dies zeigt auch die Ambition der Firma, das bestehende Produktionssystem in Hollywood mit KI zu transformieren und zu optimieren.

02 “Vorführung” alles in der virtuellen Welt: KI greift in den gesamten Filmproduktionsprozess ein

Wie kann man optimieren und transformieren?

Greifen Sie in den gesamten Produktionsprozess ein, modellieren Sie ihn ganzheitlich und verlagern Sie ihn auf eine KI-Basisplattform.

Die traditionelle Filmproduktion gliedert sich in Vor-, Haupt- und Nachproduktion: Von der Drehbuchentwicklung → Storyboard/Design → Liveaufnahmen oder Studioaufnahmen (Kamera, Licht, Schauspieler) → Grobeschnitt → Visuelle Effekte (Grünschirm, CG, Komposition) → Farbkorrektur/Ton → Veröffentlichung. Jeder Schritt hat ein eigenes Team, das die Arbeit mit Menschenkraft und physischen Geräten erledigt: Kameras, Lichtwagen, Sets, Außenkulissen, Nachbearbeitungsräume usw.

Die Schaffung des Kerninhalts basiert immer noch auf dem Prinzip “erst filmen, dann reparieren”. Wenn die Aufnahmen nicht zufriedenstellend sind, gibt es fast keine Möglichkeit zur Reparatur, außer die Szene neu aufzunehmen.

Die zukünftige Richtung von Utopai East ist die Erstellung einer KI-ursprünglichen Inhaltserstellungsplattform (AI-native production platform). Utopai East bietet einen vollständigen KI-Technologiestapel. Der gesamte Prozess von der kreativen Vorstellung bis zur Inhaltsgenerierung wird auf der KI-Plattform modelliert.

△ Als KI-Filmunternehmen konzentriert sich Utopai Studios auf den Aufbau von Grundmodellen für Filme.

Die Umsetzung der Inhaltserstellungstechnologie auf der Grundlage von KI lässt sich in etwa in die folgenden Schritte unterteilen:

Drehbuchverständnis und Weltmodellierung

- Zerlegen Sie das Drehbuch mit einem großen Modell in: Charaktere, Szenen, Stimmungsbögen, Bewegungsanforderungen, Kameralisten.

- Transformieren Sie die “Textwelt” in eine strukturierte semantische 3D-Weltbeschreibung: Welche Szenen gibt es, wann, wie ist das Wetter, das Licht und die Atmosphäre usw.

- Dieser Schritt ist wie die Schaffung einer virtuellen 3D-Welt, die den “Bedingungsraum” für die nachfolgende Generierungsmodellierung festlegt. Alle nachfolgenden Bilder/Inhalte werden unter dieser Voraussetzung generiert.

△ Utopai Studios hat bereits versucht, die virtuelle 3D-Welt, die ein Film benötigt, mit KI zu schaffen.

Prävisualisierung und Kameraplanung

- Das Modell generiert auf der Grundlage des Drehbuchinputs eine Previz (Vorführversion der Animation/Storyboard). Der Regisseur kann in der virtuellen Welt die Kamera bewegen und die Kamerapositionen wechseln, um das gewünschte Ergebnis zu bestimmen, anstatt zunächst ein Gremium ins Freie zu schicken, um Probeaufnahmen zu machen.

- Die Kameraplanung liefert nicht nur Bilder, sondern auch Kameraparameterbahnen (camera path), Brennweiten, Bewegungsarten usw., die für die nachfolgende Generierung von hochwertigen Inhalten verwendet werden. Mit Hilfe der KI-Plattform kann die Arbeitsleistung des traditionellen “Storyboarders + Visualisierungsteams” um 50 % bis 80 % gesteigert werden.

△ Künftige Filme könnten vollständig in der virtuellen Welt gedreht und angepasst werden.

Materialgenerierung und Szenenkomposition

- Ein auf einer großen Menge an kompatiblen 3D-Kompositionsdaten trainiertes Modell kann direkt hochwertige Materialien wie Szenen, Propstücke, Statisten, Effektelemente usw. generieren.

△ Von einer Zeile Text bis zu einer vollständigen 3D-Welt: Utopai erforscht die KI-gesteuerte 3D-Layoutgenerierung.

- Diese Materialien sind keine einfachen 2D-Bilder, sondern 3D-Daten, die in der virtuellen 3D-Welt Volumen/geometrische Informationen haben und von mehreren Winkeln wiederverwendet werden können. Diese Daten können nach Bedarf flexibel angepasst und wiederholt wiederverwendet werden. Beispielsweise kann dieselbe “Straßenszene” für 20 Szenen verwendet werden, ohne dass tatsächlich ein riesiger Studio errichtet werden muss.

Generierung von hochwertigen Fertigprodukten

- Generierung von Langvideos mit einheitlichem Stil, Charakterkonstanz und Zeitachsenkonstanz