Postproduktion allgemein Forum



KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"



Fragen rund um die Nachbearbeitung, Videoschnitt, Export, etc. (div. Software)
Antworten
Frank Glencairn
Beiträge: 23078

Neural Rendering Dialog Replacement

Beitrag von Frank Glencairn »

Sehr spannend was sich da gerade alles so tut.

The Champion directed by Maciej Barczewski, is the first full theatrical feature film to be converted to English using neural rendering. All of the performances were changed so the actors not only are revoiced into English, but their faces were replaced so the actors are also visibly speaking English as well.

The film tells the true story of pre-war boxing champion Tadeusz “Teddy” Pietrzykowski, who in 1940 arrives with the first transport of prisoners to the newly created Auschwitz concentration camp. Using advances in AI and machine learning the entire film has the actor’s faces replaced by an inferred version, visually built from actors re-recording dialogue in a sound studio.

https://www.fxguide.com/fxfeatured/the- ... ialWarfare
Sapere aude - de omnibus dubitandum



SamSuffy
Beiträge: 276

Re: Neural Rendering Dialog Replacement

Beitrag von SamSuffy »

Echt faszinierend.
Nächster Schritt hierzu wäre dann noch die Kehlkopfanimation anzupassen, die passt ja im Englischen dann nicht mehr.



slashCAM
Administrator
Administrator
Beiträge: 11262

KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"

Beitrag von slashCAM »


Filme in Fremdsprachen haben immer einen großen Nachteil gegenüber Filmen, welche in der jeweils lokalen Sprache gedreht wurden, denn entweder müssen sie untertitelt werd...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
KI hilft beim Nachsynchronisieren von Kinofilm "The Champion"



Alex
Beiträge: 1339

Re: KI hilft beim Nachsynchronisieren von Kinofilm

Beitrag von Alex »

Ich verstehe den im Artikel verlinkten Trailer von "The Champion Of Auschwitz" im Kontext nicht. Was soll dieser zeigen? Einstellungen von (lippensynchron) sprechenden Leuten gibt es da quasi nicht.



tom
Administrator
Administrator
Beiträge: 1487

Re: KI hilft beim Nachsynchronisieren von Kinofilm

Beitrag von tom »

Alex hat geschrieben: Sa 16 Apr, 2022 15:49 Ich verstehe den im Artikel verlinkten Trailer von "The Champion Of Auschwitz" im Kontext nicht. Was soll dieser zeigen? Einstellungen von (lippensynchron) sprechenden Leuten gibt es da quasi nicht.
Leider gibt es keine der englisch nachsynchronisierten Szenen auf YouTube, die finden sich nur im verlinkten Artikel von FXGuide. Der Trailer ist nur für den Kontext eingebettet (ich habe das jetzt noch .
slashCAM



 Aktuelle Beiträge [alle Foren]
 
» Microsoft VASA-1 generiert realistische Video-Portraits aus einer Audiodatei
von slashCAM - Do 10:51
» Was schaust Du gerade?
von Frank Glencairn - Do 10:17
» NAB 2024 Neuigkeiten
von Frank Glencairn - Do 10:12
» Blackmagic PYXIS 6K: Die Vollformat „Box“-Kamera mit Viewfinder, 2x SDI, Sideplates (!) uvm.
von Frank Glencairn - Do 9:02
» Linsen (Vintage, Anamorphic & Co.)
von Skeptiker - Do 0:10
» Was hörst Du gerade?
von klusterdegenerierung - Mi 23:14
» Tieraufnahmen mit dem MKE600 + H1 Essential rauschen
von Skeptiker - Mi 23:06
» Messevideo: Atomos NINJA PHONE erklärt
von rob - Mi 22:39
» Was hast Du zuletzt gekauft?
von Jörg - Mi 22:08
» Blackmagic Box Camera
von roki100 - Mi 20:31
» Western Digital Ultrastar Transporter: 368 TB in der Aktentasche
von medienonkel - Mi 19:44
» GPS Receiver GP-E2 Standort anzeigen
von Reinhold888 - Mi 17:32
» Western Digital stellt weltweit erste 4 TB SD-Karte vor
von Walter Schulz - Mi 16:43
» Insta360 X4 360°-Action-Kamera filmt in 8K
von Achim KCW - Mi 16:13
» Blackmagic URSA Cine 12K - 16 Blendenstufen für 15.000 Dollar!
von Frank Glencairn - Mi 15:33
» Netflix „Ripley“
von TomStg - Mi 13:17
» Adobe entfernt negativ promts
von klusterdegenerierung - Mi 12:09
» Tragischer Unfall am Set trotz Filmwaffe: Kamerafrau stirbt nach Schuß von Alec Baldwin
von 7River - Mi 11:23
» Dehancer Pro - Filmsimulation auf höchstem Niveau
von Frank Glencairn - Mi 10:19
» Blackmagic DaVinci Resolve 19 jetzt auch auf Deutsch
von medienonkel - Mi 9:58
» DJI Avata 2, Goggles 3 und RC Motion 3 im ersten Praxistest
von Videopower - Di 23:35
» RED ist nun eine Nikon-Tochter - und Jarred Land abgesetzt
von iasi - Di 23:24
» ASUS ProArt PA32KCX - 8K Mini-LED-Monitor mit DisplayPort 2.1
von MK - Di 20:22
» Blackmagic stellt neues DaVinci Resolve Micro Color Panel für 495 Dollar vor
von patfish - Di 19:57
» Neues Blackmagic DaVinci Resolve 19 bringt über 100 neue Funktionen
von MK - Di 19:23
» Videointerview: Die neue Blackmagic PIXIS 6K Box Kamera erklärt
von iasi - Di 18:42
» Adobe Firefly für Premiere Pro - Generative Extend, Object removal/addition
von klusterdegenerierung - Di 16:47
» Welches Highclass Smartphone für gute BTS-Video?
von Frank Glencairn - Di 16:09
» !Großes Serien update bei Samyang!
von Bildlauf - Di 15:54
» Videointerview: Adobe Premiere Pro - die neuen KI Funktionen erklärt
von slashCAM - Di 15:42
» ARRI zeigt Multicam-System ALEXA 35 Live
von slashCAM - Di 14:45
» Neues Ärzte-Musikvideo schafft durchgehende Konsistenz mittels KI-Stil
von februarfinal8 - Di 14:31
» Blackmagic senkt Preise für alle Video Assist 3G- und 12G-Monitor-Recorder
von roki100 - Di 12:49
» Apple Vision Pro: Verkaufsstart (USA) ab Februar für 3.499,- Dollar + neuer Werbeclip
von NurlLeser - Di 9:36
» ZOOM F6 - 32 Bit Audio Recorder
von berlin123 - Mo 21:50