KI Forum



VFX leicht gemacht: mit KI Gesichter animieren und Stimmen synthetisieren



Alles rund um KIs (DeepLearning), Algorithmen für spezielle Effekte, zur Generierung von Bildern und Videos und mehr
Antworten
slashCAM
Administrator
Administrator
Beiträge: 11279

VFX leicht gemacht: mit KI Gesichter animieren und Stimmen synthetisieren

Beitrag von slashCAM »


Wie einfach und doch wirkungsvoll inzwischen verschiedene KI-Tools im Zusammenspiel eingesetzt werden können, um interessante Effekte in Videos zu realisieren, hatte kürz...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
VFX leicht gemacht: mit KI Gesichter animieren und Stimmen synthetisieren



-paleface-
Beiträge: 4644

Re: VFX leicht gemacht: mit KI Gesichter animieren und Stimmen synthetisieren

Beitrag von -paleface- »

Ich sag ja...noch 10 Jahre dann läuft alles auf Knopfdruck.
www.mse-film.de | Kurzfilme & Videoclips

www.daszeichen.de | Filmproduktion & Postproduktion



patfish
Beiträge: 291

Re: VFX leicht gemacht: mit KI Gesichter animieren und Stimmen synthetisieren

Beitrag von patfish »

Da Face replacement ein extrem aufwendiges Verfahren ist, die Bewegung/Animation der Muskel extrem komplex ist und wir Menschen aus täglichen Training jede kleine Unnatürlichkeit sofort bemerkten (uncanny), hat KI hier tatsächlich einen großen Vorteil. Einzig, um wirklich 100 % realistische, hochaufgelöste Modelle (z.B. für Hollywoodfilme) anzutrainieren, braucht es eine riesige und hochqualitative Datenbank an Referenzfototage und enorm viel Rechenkapazität. Dafür spart man sich aber Motion Capture und viele CG Artists.

Bei klassischen VFX Tasks wie Rotoscoping, Keying, Inpainting, Cleanplates usw. sind die aktuellen KI-Tools aber noch nicht ausgereift genug, um hochwertigen VFX-Projekten zu genügen. Speziell die manuelle Kontrolle über den Output muss noch viel zugänglicher werden. Das ist generell, der Punkt an dem noch am meisten geforscht und entwickelt werden muss!

Aja, und Ebsynt ist kein KI Toll! Das setzt auf klassische Optical Flow Algorithmen.



medienonkel
Beiträge: 924

Re: VFX leicht gemacht: mit KI Gesichter animieren und Stimmen synthetisieren

Beitrag von medienonkel »

Ich frage mich auch, wie man in stable diffusion konstant passende keyframes erzeugt. Selbst bei neutralem Hintergrund und betonierter Kadrierung, konstantem seed und unangetasteten settings/prompt kommt 100 frames später ganz was anderes raus.

Wie patfish ja schon sagte hat ebsynth nichts mit KI zu tun. Bei relativ statischem Gesichtsausdruck kann die Methode so klappen, sobald aber größere Mimik dazu kommt, geht das Glitchen los.
Da wäre entsprechendes deep faking eher angebracht. Gibt's ja auch schon seit... Jahren.
Und auch schon für full body faking.

Trotzdem hat er sehr kreativ die tools genutzt. Aber auch gleich die aktuellen Einschränkungen gezeigt.



roki100
Beiträge: 17841

Re: VFX leicht gemacht: mit KI Gesichter animieren und Stimmen synthetisieren

Beitrag von roki100 »

"Deine Zeit ist begrenzt. Verschwende sie nicht damit, das Leben eines Anderen zu leben"
(Steve Jobs)



Darth Schneider
Beiträge: 24203

Re: VFX leicht gemacht: mit KI Gesichter animieren und Stimmen synthetisieren

Beitrag von Darth Schneider »

Viel echter, irgendwie doch, wirklich fast wie der Elvis, zumindest das Bild, nur wenn er singt…;)
Gruss Boris



 Aktuelle Beiträge [alle Foren]
 
» Was schaust Du gerade?
von roki100 - Sa 0:21
» Mitarbeitende Gesellschafter für Youtube-Werbeagentur in Frankfurt-Fechenheim gesucht!
von Darth Schneider - Fr 22:45
» S: Videokamera
von Darth Schneider - Fr 21:11
» Biete: Blackmagic Pocket Cinema 4K mit viel Zubehör
von MrMeeseeks - Fr 20:36
» DJI Mini 5 Pro kommt in 5 Wochen - mit 50 Min Flugzeit und LiDAR
von Darth Schneider - Fr 17:01
» Accsoon SeeMo 4K HDMI Adapter macht Handy zum Kameramonitor - samt Livestreaming
von slashCAM - Fr 15:30
» Externe USB4 SSD als Mac Systemplatte nutzen - am Beispiel der Corsair EX400U
von slashCAM - Fr 12:48
» Meta fährt Quest & VR runter
von cantsin - Fr 8:04
» Nikon Z8 Firmware 3.0 ist da - Viele neue kostenlose Funktionen (u.a. AF, N-Log)
von tom - Do 17:53
» DJI stellt Transport-Drohne FlyCart 100 mit 80 Kilo Nutzlast vor
von gammanagel - Do 17:43
» Apple gibt iPhone-Videoaufnahme im Kinomodus für alle frei
von DeeZiD - Do 16:40
» ONLINE-VIDEO-MONITOR 2025
von ruessel - Do 11:49
» Was hörst Du gerade?
von pillepalle - Do 10:50
» Gelöscht
von Jalue - Mi 23:43
» Selena Gomez Video mit Iphone gedreht 496 Millionen Klicks
von MovieGuy - Mi 16:31
» Sony BURANO - kostenfreier Austausch des Infrarot (IR)-Sperrfilters
von slashCAM - Mi 14:12
» C70 + DJI Ronin RS2
von rob - Mi 12:49
» Iphone 15- 4K Video in 60p Kino Modus uvm
von MovieGuy - Mi 12:17
» Tamron 16-30mm F/2.8 Di III VXD G2 - Ultra-Weitwinkel-Zoom für Sony und Nikon
von slashCAM - Mi 9:36
» RIP - Frank Glencairn :-(
von Alex - Mi 8:39
» Die Filmanalyse - Mit Wolfgang M Schmitt
von Nigma1313 - Di 21:15
» Cineflares Lens Lab wächst
von ruessel - Di 17:17
» Sony A1 vs Nikon Z6 III vs Panasonic S5IIX: Ist höhere Sucherauflösung in der Praxis besser?
von slashCAM - Di 15:33
» Neue SFX-KI in Adobe Firefly erzeugt lizenzfreie Soundeffekte
von Darth Schneider - Di 12:59
» Resolve Studio: 360 Grad Formatüberschreitend und immersiv
von Jott - Di 12:11
» Interview Bildwinkel tauschen
von pillepalle - Mo 22:10
» Kamera fürs TV / Doku
von Darth Schneider - Mo 21:37
» Deity Theos vs Sennheiser EW DP - Erfahrungen?
von rush - Mo 19:16
» Sony Burano: Kostenfreier Austausch des Infrarot-Sperrfilters bis Mai 2026
von ruessel - Mo 18:04
» Nvidias SUPER-Modelle RTX 5070 / Ti / 5080 mit deutlich mehr Speicher
von Tscheckoff - Mo 12:49
» Erstes Update von DaVinci Resolve 20 - u.a. mit Blackmagic RAW SDK 4.6
von freezer - Mo 12:36
» Werbung - es geht auch gut ;) Sammelthread
von Alex - Mo 7:45
» Hollywood in der Krise: Kalifornien erhöht Steueranreize für Dreharbeiten
von 7River - Mo 7:25
» Blackmagic URSA Cine 17K 65 bekommt Netflix Zertifizierung
von iasi - So 22:43
» Insta360 Flow 2: 3-Achsen Smartphone-Gimbal mit automatischem KI-Tracking
von slashCAM - So 9:15