Neuer Trend: Mit Generative Fill Videos in Photoshop erweitern

[11:35 Do,13.Juli 2023 [e] von Rudi Schmidts]

Mit der Einführung von Firefly und der anschließenden Integration in die erste offizielle Photoshop Beta hat Adobe die Tür zur Generativen KI für alle Creative Cloud Anwender geöffnet.

Die neue Funktion "Generative Fill" basiert auf einem generativen KI-Modell, welches maskierte Bereiche in einem Bild schlüssig ergänzen kann. Wie bereits bei Stable Diffusion können hiermit nicht nur Objekte gelöscht oder verändert werden, sondern ein Bild kann hiermit auch über seinen Rahmen erweitert werden - indem die Firefly KI das präsentierte Bildmotiv optisch "weiter spinnt".

Bei Bewegtbildern funktioniert eine solche Erweiterung in der Regel jedoch nicht, weil hier für jeden Frame eines Videos ein anderer Inhalt erfunden wird, was die zeitliche Konsistenz des Videos (ze)rstört.

Was jedoch durchaus funktioniert, ist eine fiktive Rahmenerweiterung, solange die Kameraposition statisch ist - sprich mit einem Stativ aufgenommen wurde. Solange keine Objekte wie z.B. Vögel oder Schatten in den ursprünglichen Rahmen eintreten oder diesen verlassen kann ein statischer Bereich um das Video "erfunden" werden. Klingt etwas kryptisch? Dann hilft vielleicht dieses Video hier zur einfachen Veranschaulichung:

Wer also bei der Aufnahme ein paar Regeln beachtet, kann mit diesem Trick sein "Set" sehr imposant und kostengünstig erweitern. Im Netz poppen aktuell beispielsweise bei Twitter

hier oder

hier neue Videos auf, die imposant die Möglichkeiten zeigen.

Zur Verfeinerung sind noch weitere Tricks denkbar, wie zusätzliches Rauschen, virtuelle Zooms oder andere Kamerabewegungen. Letztere können trotz fehlender Parallaxenverschiebung die gefühlte Authentizität erhöhen, sofern man den Effekt nur sehr langsam und subtil einsetzt. Hilfreich ist dabei auch, dass Photoshop selbst ja bereits eine Timeline für Bewegtbilder besitzt, in der sich rudimentär arbeiten lässt.

mehr Informationen bei www.youtube.com

[9 Leserkommentare] [Kommentar schreiben] Letzte Kommentare:


rainermann 23:12 am 15.7.2023

Fiel mir auch auf. Ist aber nicht an der Kante zum Originalbild (was vielleicht stärker gestört hätte...), sondern weiter unten und auch nicht durchgehend. Sieht für mich im...weiterlesen


klusterdegenerierung 12:04 am 15.7.2023

Und diese durchlaufende Helligkeitskante bleibt so im Bild?


rainermann 11:27 am 15.7.2023

Ha, das hab ich tatsächlich in einem aktuellen Musikvideo angewandt. Budget wieder mal gering, wollte aber ein "Gitter" im Bild haben. Also einen ruhigen Shot genommen, Bild per...weiterlesen

[ Alle Kommentare ganz lesen]