Logo Logo
/// News

Diffusae - Stable Diffusion als KI-Plugin für Adobe After Effects

[10:25 Di,23.Mai 2023 [e]  von ]    

Unter dem Namen Diffusae entwickelt ein kleines kanadisches Team namens BSKL ein Plugin, welches innerhalb von After Effects direkten Zugriff auf generative Stable Diffusion Modelle erlauben soll.

Die Bedienung ist aktuell noch ziemlich rudimentär, denn Stable Diffusion steht "nur" als eingebundener Ebenen-Effekt zur Verfügung. Dort lässt sich der Prompt durch einen unsichtbaren weiteren Text-Layer injizieren.
Weiters lässt sich das genutzte Modell, die Guidance und Stärke des Prompts sowie die Qualität und der Seed einstellen. Somit hat man weitaus weniger Möglichkeiten, als bei der Nutzung von Stable Diffusion mit einer WebUI.



diffusae_parameter



Dafür soll die nicht immer triviale Installation automatisiert sein und das Update auf aktuelle Modelle wie Stable Diffusion 2.1 kann ebenfalls ohne Zutun des Anwenders erfolgen.

Größter Vorteil ist jedoch sicherlich die direkte Anwendung in Bildsequenzen sowie die Unterstützung von Masken - wodurch sich Stable Diffusion bequem in einzelnen Bildausschnitten nutzen lässt, ohne die GPU mit zu hohen Auflösungen zu überfordern.

diffusae_header



Das große Fragezeichen bleibt jedoch die zeitliche Kohärenz. Aktuell fallen nämlich die zufälligen Veränderungen zwischen den Einzelbildern prinzipbedingt relativ groß aus, was regelmäßig für einen sehr psychedelische Anmutung der Effekte sorgt. Hier erhoffen sich die Macher in Zukunft deutliche Verbesserungen durch weitere Forschung in der großen Stable Diffusion Community.

Aktuell funktioniert Diffusae nur unter Windows mit einer Nvidia Karte. Eine macOS Version für Apple Silicon Modelle soll jedoch laut Roadmap noch dieser Tage (Juni 2023) erscheinen.

Aktuell kostet das After Effects Plugin bei aescripts 49 Dollar, jedoch kann man sich für einen kostenlosen Beta Test registrieren, was wohl für interessierte Anwender der beste Weg sein dürfte, das Programm intensiver auszuprobieren. Zusätzlichen Kontakt zu den Entwicklern bekommt man auf diesem Wege über einen Discord-Server.


Link mehr Informationen bei aescripts.com

  
[4 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
iasi    22:21 am 23.5.2023
Bisher macht auf mich diese ganze KI-Sache eher den Eindruck eines gestalterischen Kontrollverlustes. Es ist doch eigentlich gar nicht möglich, das zu erhalten, was man möchte,...weiterlesen
Frank Glencairn    21:46 am 23.5.2023
Das ist ne ziemliche Binsenweisheit, da das auf jede neue Techologie der Geschichte - angefangen vom Faustkeil - zugetroffen ist. Es ist quasi ein inhärenter Bestandteil neuer...weiterlesen
macaw    21:09 am 23.5.2023
"Sollte" ist schon zu spät gesagt. Die falschen Hände haben die Werkzeuge bereits fest im Griff...
[ Alle Kommentare ganz lesen]

  Vorige News lesen Nächste News lesen 
bildBlackmagic DaVinci Resolve 18.5 Beta 3 bringt zahlreiche Verbesserungen bildKleine Vlogging-Kamera Sony ZV-1 II filmt nun noch weitwinkliger


verwandte Newsmeldungen:
Plugins:

Auto-Photoshop-StableDiffusion-Plugin jetzt mit ControlNet-Unterstützung 6.März 2023
Neue Plugin-Pakete für Final Cut Pro von Boris FX kosten 59 Dollar 19.September 2022
Sound Devices 833 Mixer-Rekorder erhält per Plugin weitere 4 Kanäle 18.Dezember 2021
Audio Plugins auf der GPU berechnen - BRAINGINES GPU Audio 8.März 2021
Mainconcept Codec Plugin für DaVinci Resolve bringt Support für HEVC, Sony XAVC/XDCAM und P2 AVC Ultra 17.November 2020
Silhouette Paint: professionelles Roto- und Paint-Tool jetzt auch als Plugin verfügbar 15.April 2020
Premiere Plugins und andere Tools von Motion Array für 90 Tage kostenlos 1.April 2020
alle Newsmeldungen zum Thema Plugins

Adobe After Effects:

Nodebasiertes Editing für After Effects - Hollywood Illusion Magic Nodes 1.5 31.Mai 2023
NAB Neuigkeiten von Adobe zu Premiere Pro, After Effects und Frame.io 12.April 2023
Adobe After Effects bekommt ACES Workflow über OpenColorIO 9.Februar 2023
Magic Nodes: Endlich Node-Compositing in After Effects 25.Januar 2023
Neu: Adobe Premiere Pro 23.1 und After Effects 23.1 bringen Verbesserungen 7.Dezember 2022
Neu: Adobe Premiere Pro verbessert, After Effects bekommt flexible Spurmaskenebenen 19.Oktober 2022
Kostenlose Online-Sessions zu Premiere Pro und After Effects auf der Adobe MAX 2022 16.Oktober 2022
alle Newsmeldungen zum Thema Adobe After Effects

Compositing:

Nodebasiertes Editing für After Effects - Hollywood Illusion Magic Nodes 1.5 31.Mai 2023
Blackmagic DaVinci Resolve 18.5 Beta 3 bringt zahlreiche Verbesserungen 22.Mai 2023
Blackmagic DaVinci Resolve 18.5 Beta 2 ist da! 4.Mai 2023
Blackmagic veröffentlicht kostenloses Handbuch speziell für neue DaVinci Resolve 18.5 Features 23.April 2023
DaVinci Resolve Remote-Monitoring - 10 Bit HDR Vorschau über die Cloud mit iOS-App 21.April 2023
DaVinci Resolve 18.5: Neue Funktionen erklärt mit Screencaps: Relight, Text-Based Editing ... 17.April 2023
Großes Blackmagic DaVinci Resolve 18.5 Update bringt über 150 neue Funktionen 16.April 2023
alle Newsmeldungen zum Thema Compositing


[nach oben]

















passende Forenbeiträge zur News:

Archive

2023

Juni - Mai - April - März - Februar - Januar

2022
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 4.Juni 2023 - 12:02
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*