Seite 1 von 1

KI synchronisiert Lippen und Audio in Echtzeit

Verfasst: Sa 19 Sep, 2020 23:49
von ruessel
meldung vom 14.9.2020: Eine neue KI verändert die Mundbewegungen eines Sprechers so, dass sie zu jedem beliebigen eingesprochenen Text passen. Das sieht erschreckend realistisch aus.
Quelle: https://www.spektrum.de/news/ki-synchro ... obal-de-DE


Re: KI synchronisiert Lippen und Audio in Echtzeit

Verfasst: So 20 Sep, 2020 09:02
von Frank Glencairn
Ganz beachtlich.

Bin ja mal gespannt, wie sich das auf Synchros auswirkt.

Re: KI synchronisiert Lippen und Audio in Echtzeit

Verfasst: So 20 Sep, 2020 09:31
von ruessel
In fünf Jahren ist das in allen Handys und Flats fest eingebaut....eine kleine Revolution.

Re: KI synchronisiert Lippen und Audio in Echtzeit

Verfasst: So 20 Sep, 2020 10:43
von Bluboy
Ich bin eher der Ansicht dass es,wenn es gut funktioniert von Markt verschwinden wird,

Re: KI synchronisiert Lippen und Audio in Echtzeit

Verfasst: So 20 Sep, 2020 11:09
von ruessel
Ich bin eher der Ansicht dass es,wenn es gut funktioniert von Markt verschwinden wird,
Lügenpresse?

ich glaube die Büchse der Pandora ist nun offen. Wird starke Konsequenzen in den sozialen Medien oder Nachrichten aus fremden Ländern haben, an Gericht verwertbaren Videofiles gar nicht erst zu denken.

Re: KI synchronisiert Lippen und Audio in Echtzeit

Verfasst: So 20 Sep, 2020 11:34
von Frank Glencairn
Das wurde bei den Deepfakes vor ein paar Jahren auch schon behauptet, hat sich aber auch als Ente herausgestellt.

Re: KI synchronisiert Lippen und Audio in Echtzeit

Verfasst: So 20 Sep, 2020 15:08
von ruessel
Ja, da hast du auch Tonnen von perfekten Referenzmaterial benötigt und viel Zeit. jetzt nur eine gute Grafikkarte.

Re: KI synchronisiert Lippen und Audio in Echtzeit

Verfasst: So 20 Sep, 2020 15:26
von srone
ich fürchte wenn es so weitergeht, braucht man bald nichts mehr selberdrehen, du beschreibst der ki alle wesentlichen details deines films et voila, das fertige mp4 landet auf deiner festplatte...;-)

lg

srone

Re: KI synchronisiert Lippen und Audio in Echtzeit

Verfasst: Mo 21 Sep, 2020 10:34
von ruessel
Hier kann kostenlos gerendert werden: http://bhaasha.iiit.ac.in/lipsync/

Einfach Videofile und Tonspur hochladen (limitiert auf 20 Sekunden)

KI synchronisiert Lippenbewegungen mit Audio in Echtzeit

Verfasst: Mi 23 Sep, 2020 14:45
von slashCAM

Der neue DeepLearning Algorithmus "Wav2Lip" eines indischen Forscher-Teams kann die Lippenbewegungen eines Sprechers an die Worte aus einer beliebigen Audioaufnahme in Ec...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
KI synchronisiert Lippenbewegungen mit Audio in Echtzeit