Die AI-Technologie ist mittlerweile weit genug fortgeschritten, um die Grundlage für komplette Trailer zu nicht wirklich existierenden Serien oder Filmen basierend auf nur einigen wenigen Angaben zu erschaffen. Der YouTube-Kanal Abandoned Films hat genau diese Art von AI-Technik und sehr viel investierte Zeit dafür verwendet, um einen Teaser Trailer für eine Adaption des Silmarillion von J.R.R. Tolkien zu erschaffen. Viele Fans wünschen sich schon seit einiger Zeit eine Serie oder Filme zu diesem Werk und der AI-Trailer soll wohl einen Vorgeschmack darauf liefern, wie so ein Projekt aussehen könnte.
Der Trailer ist auf jeden Fall eine gemischte Erfahrung. Umgebungen, Szenen und Designs sehen teilweise wirklich beeindruckend aus und das Ganze weckt bei mir den Wunsch wirklich eine Adaption des Silmarillion zu erhalten. An den Dialogen, Kameraführungen und dem Aufbau der Szenen merkt man aber deutlich, dass kein Mensch hinter diesem Projekt steckt. Es gibt einfach zu viele Wiederholungen und Schnitte, die eine echte Person gezielt vermeiden würde. Ansonsten ist es echt lustig, dass selbst die AI hinter Henry Cavill her ist und ihn in das Projekt gesteckt hat.
Was die Chance auf eine tatsächliche Adaption betrifft, so wird die Tolkien Estate die Rechte an dem Silmarillion in den nächsten Jahrzehnten wohl erst einmal nicht verkaufen. Die aktuellen Entscheidungsträger sind einfach zu unzufrieden damit, wie die bisherigen Adaptionen die Welt von Tolkien umgesetzt haben. Die Lage wird sich wohl erst ändern, wenn andere Menschen die Entscheidungen treffen oder das Werk irgendwann in die Gemeinfreiheit übergeht. Dieser Umstand ist zwar etwas enttäuschend, aber irgendwo kann man vermutlich auch verstehen, warum die Tolkien-Familie ausgerechnet dieses Werk so stark beschützt.
Anzeige
So wie du das beschreibst weckt es den Eindruck als ob der Ersteller nur einen Prompt geschrieben und dann einen kompletten fertigen Trailer erhalten hat.
Die Vorgehensweise für so einen Trailer ist tatsächlich aber um einiges aufwändiger und hat vom generieren des ersten Bildes bis zum fertigen Trailer sicher 100 oder mehr Stunden beansprucht.
Der Uploader schreibt zum Workflow folgendes:
„An AI generated Silmarillion trailer I put together using Midjourney, Luma and Kling. Sound effects and voiceovers in Eleven Labs. Music by Audiomachine. “
Jeder einzelne Cut ist ein, in diesem Fall, in Midjourney generiertes Bild. Aufgrund der hohen Qualität wahrscheinlich mit einigen verschiedenen Techniken. (Was es da aktuell bei Midjourney für Möglichkeiten gibt bin ich mir gar nicht so im Bilde. Ich selbst nutze aktuell SD.)
Dabei wurden sehr wahrscheinlich zu jedem Bild ettliche verschiedene Versionen generiert und die jeweils besten ausgesucht.
Im Anschluss wurden die Bilder einzeln mit Luma und Kling mit jeweils eigenen Prompts, die Regieanweisungen enthalten, in bewegte Clips umgewandelt. Oft sind diese Clips fehlerhaft und müssen mehrmals generiert und im Prompt angepasst werden bis sie ein zufriedenstellendes Ergebnis liefern. Es wurden extrem viele dieser Cuts/Clips verwendet.
Hier hört der Spaß aber nicht auf. Jeder Soundeffekt, die Voicelines und auch die Musik wurden mit einzelnen Prompts so lange generiert bis die Outputs perfekt oder zumindest zufriedenstellend waren.
Im Anschluss wurde alles manuell zusammengeschnitten und vielleicht auch visuell bearbeitet (Farbe usw.) aber das weiß ich nicht.
Und dass „sogar die AI Cavill verwendet hat“ war mit Sicherheit kein Zufall sondern exakt so mit Midjourneys img2img Techniken generiert. Also Bilder von Cavill als Vorlage und dann mit Prompts angepasst.
AI ist eben noch nicht so weit um „ganze Trailer aus einigen wenigen Angaben“ zu erstellen und diese Aussage untermauert ein wenig wie viel Arbeit in diesem Trailer steckt.
Dadurch dass jeder der genutzten Services kostenpflichtig ist hat das ganze Projekt wahrscheinlich auch eine gute Stange Geld gekostet.
So wie du das beschreibst weckt es den Eindruck als ob der Ersteller nur einen Prompt geschrieben und dann einen kompletten fertigen Trailer erhalten hat.
Die Vorgehensweise für so einen Trailer ist tatsächlich aber um einiges aufwändiger und hat vom generieren des ersten Bildes bis zum fertigen Trailer sicher 100 oder mehr Stunden beansprucht.
Der Uploader schreibt zum Workflow folgendes:
„An AI generated Silmarillion trailer I put together using Midjourney, Luma and Kling. Sound effects and voiceovers in Eleven Labs. Music by Audiomachine. “
Jeder einzelne Cut ist ein, in diesem Fall, in Midjourney generiertes Bild. Aufgrund der hohen Qualität wahrscheinlich mit einigen verschiedenen Techniken. (Was es da aktuell bei Midjourney für Möglichkeiten gibt bin ich mir gar nicht so im Bilde. Ich selbst nutze aktuell SD.)
Dabei wurden sehr wahrscheinlich zu jedem Bild ettliche verschiedene Versionen generiert und die jeweils besten ausgesucht.
Im Anschluss wurden die Bilder einzeln mit Luma und Kling mit jeweils eigenen Prompts, die Regieanweisungen enthalten, in bewegte Clips umgewandelt. Oft sind diese Clips fehlerhaft und müssen mehrmals generiert und im Prompt angepasst werden bis sie ein zufriedenstellendes Ergebnis liefern. Es wurden extrem viele dieser Cuts/Clips verwendet.
Hier hört der Spaß aber nicht auf. Jeder Soundeffekt, die Voicelines und auch die Musik wurden mit einzelnen Prompts so lange generiert bis die Outputs perfekt oder zumindest zufriedenstellend waren.
Im Anschluss wurde alles manuell zusammengeschnitten und vielleicht auch visuell bearbeitet (Farbe usw.) aber das weiß ich nicht.
Und dass „sogar die AI Cavill verwendet hat“ war mit Sicherheit kein Zufall sondern exakt so mit Midjourneys img2img Techniken generiert. Also Bilder von Cavill als Vorlage und dann mit Prompts angepasst.
AI ist eben noch nicht so weit um „ganze Trailer aus einigen wenigen Angaben“ zu erstellen und diese Aussage untermauert ein wenig wie viel Arbeit in diesem Trailer steckt.
Dadurch dass jeder der genutzten Services kostenpflichtig ist hat das ganze Projekt wahrscheinlich auch eine gute Stange Geld gekostet.
Natürlich steckt da viel Arbeit drin. Ich wollt jetzt nicht jeden Arbeitsschritt beschreiben, weil der Beitrag zu lang geworden wäre. Und im Grunde ist es halt „Prompt“ führt zu automatisch erzeugten Inhalten. Ich erwarte irgendwie, dass Leute schlau genug sind den Rest selbst zu erkennen. Allerdings war der Text vielleicht doch etwas zu simpel, weshalb ich es leicht angepasst habe. Guter Hinweis.
Vor allem die Stelle, dass kein echter Mensch dahinter steckt hat sich nicht gut angefühlt als jemand, der selber gerne mal mit AI arbeitet. Aber sonst guter Beitrag wie immer. 😀
Elben Hitler und seine Noldor SS beim austicken und Beleriand ins Meer befördernd zu zusehen hätte was.