Postproduktion allgemein Forum



KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"



Fragen rund um die Nachbearbeitung, Videoschnitt, Export, etc. (div. Software)
Antworten
Frank Glencairn
Beiträge: 26509

Neural Rendering Dialog Replacement

Beitrag von Frank Glencairn »

Sehr spannend was sich da gerade alles so tut.

The Champion directed by Maciej Barczewski, is the first full theatrical feature film to be converted to English using neural rendering. All of the performances were changed so the actors not only are revoiced into English, but their faces were replaced so the actors are also visibly speaking English as well.

The film tells the true story of pre-war boxing champion Tadeusz “Teddy” Pietrzykowski, who in 1940 arrives with the first transport of prisoners to the newly created Auschwitz concentration camp. Using advances in AI and machine learning the entire film has the actor’s faces replaced by an inferred version, visually built from actors re-recording dialogue in a sound studio.

https://www.fxguide.com/fxfeatured/the- ... ialWarfare
Sapere aude - de omnibus dubitandum



SamSuffy
Beiträge: 287

Re: Neural Rendering Dialog Replacement

Beitrag von SamSuffy »

Echt faszinierend.
Nächster Schritt hierzu wäre dann noch die Kehlkopfanimation anzupassen, die passt ja im Englischen dann nicht mehr.



slashCAM
Administrator
Administrator
Beiträge: 11279

KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"

Beitrag von slashCAM »


Filme in Fremdsprachen haben immer einen großen Nachteil gegenüber Filmen, welche in der jeweils lokalen Sprache gedreht wurden, denn entweder müssen sie untertitelt werd...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"



Alex
Beiträge: 1920

Re: KI hilft beim Nachsynchronisieren von Kinofilm

Beitrag von Alex »

Ich verstehe den im Artikel verlinkten Trailer von "The Champion Of Auschwitz" im Kontext nicht. Was soll dieser zeigen? Einstellungen von (lippensynchron) sprechenden Leuten gibt es da quasi nicht.



tom
Administrator
Administrator
Beiträge: 1507

Re: KI hilft beim Nachsynchronisieren von Kinofilm

Beitrag von tom »

Alex hat geschrieben: Sa 16 Apr, 2022 15:49 Ich verstehe den im Artikel verlinkten Trailer von "The Champion Of Auschwitz" im Kontext nicht. Was soll dieser zeigen? Einstellungen von (lippensynchron) sprechenden Leuten gibt es da quasi nicht.
Leider gibt es keine der englisch nachsynchronisierten Szenen auf YouTube, die finden sich nur im verlinkten Artikel von FXGuide. Der Trailer ist nur für den Kontext eingebettet (ich habe das jetzt noch .
slashCAM



 Aktuelle Beiträge [alle Foren]
 
» RIP - Frank Glencairn :-(
von Darth Schneider - So 11:27
» Was schaust Du gerade?
von roki100 - So 10:49
» APV-Codec: Visuell verlustfrei, Open Source und jetzt in Blackmagic Camera App
von cantsin - So 10:41
» Ersatz für Pinnacle Studio 9 gesucht
von andihonda - Sa 20:25
» Panasonic L-Mount Cine-Kamera als Konkurrent zur Sony FX3 im Anflug?
von iasi - Sa 20:08
» Tragischer Unfall am Set trotz Filmwaffe: Kamerafrau stirbt nach Schuß von Alec Baldwin
von rush - Sa 19:54
» Sony A7S III erste Erfahrungen, Bugs, Problemlösungen,...
von rush - Sa 19:05
» Aus Sony FX3 wird FX3a mit neuem Display
von iasi - Sa 18:58
» Wird Sony bald seine Sensor Sparte ausgliedern?
von iasi - Sa 18:51
» Was hörst Du gerade?
von Dardy - Sa 14:23
» NUR KOPIEN? Wie gut/schlecht ist der deutsche Film?
von iasi - Sa 12:41
» Neuer Portkeys PT5 III Kameramonitor wiegt ca. 150g und ist etwas heller als zuvor
von Bildlauf - Sa 10:38
» RØDE Central & RØDECaster: Alle Mikrofone & Interfaces zentral im Griff
von slashCAM - Sa 10:00
» Nikon Z50II Create-a-Cut Wettbewerb: Stimme für den besten Clip ab!
von Jan - Fr 20:54
» Limited RGB Helligkeitsbereich messen
von PixelKracher - Fr 12:08
» Was hast Du zuletzt gekauft?
von ruessel - Fr 11:48
» Blackmagic Camera Android 2.2 bringt Cloud-Sync, APV-Codec und mehr
von slashCAM - Fr 11:21
» Drastische Preissenkung bei Intel Mainstream-CPU - Core Ultra 7 265KF unter 300 Euro
von Abercrombie - Fr 8:22
» Der Koffer - ein automotiver Kurzfilm
von TomStg - Fr 7:50
» Andor | offizieller Trailer | Disney+
von Darth Schneider - Fr 6:24
» Neue Umfrage: Mit welchem Programm schneidest Du?
von Darth Schneider - Fr 6:07
» DJI Mavic 4 Pro - 6K Video, 360° Gimbal, RC Pro 2 und bessere Hinderniserkennung
von iasi - Do 19:10
» OK Go "Love" BTS - wildes 1-Take-Musikvideo
von Sicki - Do 16:10
» DJI teasert Mavic 4 Pro Start für 13. Mai
von slashCAM - Do 14:12
» ntel® Core™ Ultra 7 265K, Prozessor
von dienstag_01 - Do 11:39
» Monitorprobleme nach Treiberupdate
von Jörg - Mi 23:05
» Problem bei Firmwareupdate mit FX6
von Christian 671 - Mi 20:43
» -SONY FX- Erfahrungsaustausch
von rush - Mi 18:48
» Nachfolger der Lumix S1II S1IIX im Mai 2025?
von cantsin - Mi 13:23
» ZEISS entwickelt virtuelle Objektive für VFX
von slashCAM - Mi 13:06
» Kompakte Fujifilm GFX100RF Mittelformatkamera mit Festoptik vorgestellt
von Bildlauf - Mi 12:21
» Auftragslage weiter Rückläufig?
von macaw - Mi 10:42
» Bilder einer Landschaft - Aischgrund
von Bluboy - Mi 9:37
» Runway Gen:48 Challenge - 50 Beispiele für KI-Kurzfilme
von 7River - Mi 7:19
» Licht how to:
von Darth Schneider - Mi 6:28