Postproduktion allgemein Forum



KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"



Fragen rund um die Nachbearbeitung, Videoschnitt, Export, etc. (div. Software)
Antworten
Frank Glencairn
Beiträge: 16311

Neural Rendering Dialog Replacement

Beitrag von Frank Glencairn » Di 12 Apr, 2022 07:31

Sehr spannend was sich da gerade alles so tut.

The Champion directed by Maciej Barczewski, is the first full theatrical feature film to be converted to English using neural rendering. All of the performances were changed so the actors not only are revoiced into English, but their faces were replaced so the actors are also visibly speaking English as well.

The film tells the true story of pre-war boxing champion Tadeusz “Teddy” Pietrzykowski, who in 1940 arrives with the first transport of prisoners to the newly created Auschwitz concentration camp. Using advances in AI and machine learning the entire film has the actor’s faces replaced by an inferred version, visually built from actors re-recording dialogue in a sound studio.

https://www.fxguide.com/fxfeatured/the- ... ialWarfare




SamSuffy
Beiträge: 79

Re: Neural Rendering Dialog Replacement

Beitrag von SamSuffy » Di 12 Apr, 2022 13:34

Echt faszinierend.
Nächster Schritt hierzu wäre dann noch die Kehlkopfanimation anzupassen, die passt ja im Englischen dann nicht mehr.




slashCAM
Administrator
Administrator
Beiträge: 11262

KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"

Beitrag von slashCAM » Sa 16 Apr, 2022 15:18


Filme in Fremdsprachen haben immer einen großen Nachteil gegenüber Filmen, welche in der jeweils lokalen Sprache gedreht wurden, denn entweder müssen sie untertitelt werd...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"




Alex
Beiträge: 192

Re: KI hilft beim Nachsynchronisieren von Kinofilm

Beitrag von Alex » Sa 16 Apr, 2022 15:49

Ich verstehe den im Artikel verlinkten Trailer von "The Champion Of Auschwitz" im Kontext nicht. Was soll dieser zeigen? Einstellungen von (lippensynchron) sprechenden Leuten gibt es da quasi nicht.




tom
Administrator
Administrator
Beiträge: 1394

Re: KI hilft beim Nachsynchronisieren von Kinofilm

Beitrag von tom » So 17 Apr, 2022 10:58

Alex hat geschrieben:
Sa 16 Apr, 2022 15:49
Ich verstehe den im Artikel verlinkten Trailer von "The Champion Of Auschwitz" im Kontext nicht. Was soll dieser zeigen? Einstellungen von (lippensynchron) sprechenden Leuten gibt es da quasi nicht.
Leider gibt es keine der englisch nachsynchronisierten Szenen auf YouTube, die finden sich nur im verlinkten Artikel von FXGuide. Der Trailer ist nur für den Kontext eingebettet (ich habe das jetzt noch .
slashCAM




Social Media

       
 Aktuelle Beiträge [alle Foren]
 
» DV Minikassetten mit Canopus EZDV Easy auf Festplatte übertragen, wie geht ihr vor?
von Skeptiker - Di 16:46
» TEARDOWN / MODDING / REPAIR etc.
von roki100 - Di 16:46
» Panasonic GH6 Firmware 2.0 bringt 120 fps ProRes RAW mit Ninja V+ und internes DCI 4K ProRes
von Darth Schneider - Di 16:44
» Xiaomi 12S Ultra: Leica-Kamera mit 1" Sensor und 10bit HDR-Aufnahme in Dolby Vision
von slashCAM - Di 16:42
» Erste Erfahrungen Sony A1
von pillepalle - Di 16:19
» Suche eine Schnittsoftware für Mac, die 4k in voller Datenrate von 160 Mbps​ der Mavic 3 ausgeben kann
von Jott - Di 16:18
» DIY: Sigma DP2 Quattro Zubehör
von ruessel - Di 14:00
» Wie wählt Netflix seine Kameras aus? Ein Blick hinter die Kulissen des Netflix Messlabor
von andieymi - Di 13:10
» Nach dem Trailer zu urteilen, könnte der doch was werden
von Map die Karte - Di 12:55
» Speicherplatzaufteilung bei Studio
von Jasper - Di 12:13
» Super 8 scan verbessern
von MOS - Di 11:24
» Potato Jet & Michael Bay
von berlin123 - Di 11:23
» Panasonic LUMIX DC-GH5 und Olympus Pro, sehr gepflegt!
von videogo - Di 10:18
» Verkaufe Sigma 30/1.4 für MFT
von 123oliver - Di 7:33
» Suche 3D-Camcorder JVC GY-HMZ 1
von Romius - Mo 22:41
» Was schaust Du gerade?
von roki100 - Mo 21:55
» Inspirierende Bücher und Videos zu Storytelling und Editing?
von berlin123 - Mo 21:23
» Red stellt V-Raptor XL in Vitrine aus
von iasi - Mo 19:31
» FilmLight: Awards für Color Grading
von rkunstmann - Mo 18:53
» Erste Beta Firmware OS5 bringt neue Funktionen für alle SmallHD Monitore
von slashCAM - Mo 18:36
» »Call to Europe« 470 bis 694 MHz sind in Gefahr!
von ruessel - Mo 17:09
» Marina Amaral: Künstlerin koloriert weltbekannte Schwarz-Weiß-Fotos
von ruessel - Mo 16:20
» Umfrage: Wenn Geld keine Rolle spielt - welche DSLM?
von slashCAM - Mo 14:54
» BIETE: Metabones Speed Booster an für Canon EF auf MFT / M43 für Blackmagic, Lumix GH3, 4, 5, 6, etc,)
von Adrian1232000 - Mo 10:11
» Sony FE PZ 16–35 mm F4 G Zoom an der FX3: Traumkombo für Gimbalsetups / DJI RS2?
von godehart - Mo 10:03
» Why did ARRI ABANDON their first digital camera? | ARRIflex D-20/D-21
von andieymi - Mo 9:43
» Hilfe! Streifen im Bild (kein Flicker)
von prime - Mo 9:02
» Blackmagic Video Assist 3.7 Update bringt Unterstützung für Fujifilm X-H2s und Verbesserungen für Panasonic Kameras
von roki100 - So 23:16
» >Der LED Licht Thread<
von klusterdegenerierung - So 20:16
» Fundament(al) erneuert - 4K-Testrechner mit AMD Ryzen 5 5600X
von tommy823 - So 20:07
» Was hörst Du gerade?
von roki100 - So 19:15
» Linsen (Vintage, Anamorphic & Co.)
von roki100 - So 19:07
» Suche Erfahrung mit Slypod Pro
von klusterdegenerierung - So 18:44
» Rode NTH-100: Professioneller Over-Ear Kopfhörer im Praxistest - inkl. Sennheiser HD 25 Vergleich
von pillepalle - So 18:39
» Sony A7S III erste Erfahrungen, Bugs, Problemlösungen,...
von Axel - So 16:29
 
neuester Artikel
 
Rode NTH-100: Professioneller Over-Ear Kopfhörer im Praxiste

Mit dem Rode NTH-100 hat Rode seinen ersten professionellen Over-Ear Kopfhörer für Musikproduktion, Mixing / Audio Editing über Podcasting und Streaming bis hin zu Location Recording / Monitoring vorgestellt. Wir haben uns den neuen Content Creation Kopfhörer von Rode angehört und ihn mit dem Sennheiser HD 25 verglichen ... weiterlesen>>

Dynamic Showdown - R5C, Z9 und S1H

Mit dem Auftritt von TicoRAW in der Firmware 2.0 von Nikons Z9 hat sich die Kamera in unserer Dynamik-Einschätzung für Videofilmer wieder weit nach oben bewegt. Doch wie nah kommt sie unserem aktuellen Dynamik-Liebling Panasonic S1H? weiterlesen>>