Meine ersten Erfahrungen mit KI-Videogeneratoren

[Jalue]

Wie wohl viele von euch probiere auch ich mit KI herum und habe mich erfolgreich bei zwei Anbietern als first adopter (oder sagt man … Beta-Tester?) beworben. Meine bisherigen Erfahrungen:

Morph Studio:
Da habe ich meine Fotos von einem Parteitag verwurstet. Das Ding animiert sie als Video und transferiert sie auf Wunsch auch in einen Comic-Stil. Klar, es läuft noch nicht perfekt, die Bewegungsdynamik ist eher bescheiden, aber wenn ich es wollte, könnte ich einen hübschen kleinen, satirischen Animationsfilm damit basteln. Dass „Fritzes“ Gesicht dabei auch mal Beulenpest-artig verrutscht, müsste man halt als Stilmittel verkaufen ;-)

LTX-Studio:
Mein erster Aufschlag: Berlin überschwemmen! Hat recht gut geklappt, war in fünf Minuten erledigt, auch wenn Auflösung und sonstige Qualität aktuell allenfalls für Social-Clips reichen. Am besten scheint diese KI zu funktionieren, wenn man nur grob eine Logline vorgibt, die Charaktere definiert und das Ding dann selbst machen lässt. Bei der Eingabe eigener Storylines zeigte es sich eher widerspenstig, was die Kohärenz der Bilder angeht. Da gibt es jede Menge Glitches und „Drohnenbilder“ sehen so aus, als wäre der Kreisel defekt oder die Propeller nicht gewuchtet. Auch haben die Stories, die die KI aus kurzen Loglines bastelt, m.E. einen leicht schmierigen Spin: Ja, da ist ein Problem! Doch die Menschen schließen sich zusammen und lösen es solidarisch. Am Ende haben sich alle lieb! Algorithmischer Positivismus und wohl eher ungeeignet für Leute, die auf Film Noir, Ken Loach oder Tarantino stehen.

Woran es sowohl bei Morph als auch LTX noch hapert: Spezifische Informationen in Prompts (z.B. einen Flugzeugtyp oder eine Automarke) zu implementieren. Das Hochladen von Referenzbildern funktioniert nur bedingt, am besten noch in Adobe Firefly. Aber das kann ja bislang nur Standbilder.

Mein vorläufiges Fazit: Noch ist das Ganze nicht ausgereift, aber spätestens, wenn Big Player wie Adobe mit erwachsenen Lösungen auf den Markt kommen (was sie ja schon ankündigen), wird es ernst. Die haben dann vermutlich auch eine reglerbasierte, präzise Steuerung, wie sie Frank sich wünscht, ich übrigens auch und damit könnte man dann ernstzunehmende Filme produzieren.

Anyway, ich finde das alles enorm spannend. Was sind eure Erfahrungen?

[Frank Glencairn]

Runway hat ja mit der Version 3 gerade einen ziemlichen Qualitätssprung gemacht.
Ich hatte bisher nur wenig Zeit damit zu spielen, aber es geht in die richtige Richtung.