Logo Logo
/// News

ElevenLabs - KI-Dubbing Audio Übersetzung als Web-Service

[11:27 So,15.Oktober 2023 [e]  von ]    

Das neue Sprachübersetzungstool von ElevenLabs kann gesprochene Inhalte in wenigen Minuten in eine andere Sprache konvertieren und dabei den Klang der Stimme des des ursprünglichen Sprechers erhalten. Damit bekommt nun jedermann ein einfaches Tool in die Hände, um eigene Videos "international zu lokalisieren".

Soweit zumindest die Theorie. Glücklicherweise kann man den Service seit kurzem selber ausprobieren, wobei die kostenlose Konvertierung auf ungefähr eine Minute des Materials beschränkt zu sein scheint.



elevenlabs_1



Für eigene Tests kann man eine Audio- oder Videodatei hochladen bzw. einfach einen Link auf diese angeben. Auch Youtube-,TikTok-, X(Twitter) sowie Vimeo-Links können als Input ohne Umwege genutzt werden. Optional kann man noch die Eingabesprache sowie eine von 29 gewünschten Ausgabesprachen wählen und nach einer Berechnungspause den Audiotrack in einer anderen Sprache hören und gegebenenfalls auch sehen.

sprachauswahl_2
Ausgabesprachen



Bei den von uns getesteten Clips wirkten die Lippen teilweise asynchroner, als die definitiv handverlesenen Beispiele des Herstellers - was natürlich auch keine leichte Aufgabe ist - die inhaltliche Übersetzung muss ja auf die unveränderten Lippen "passen". Zudem erinnert die inhaltliche Übersetzungsqualität mehr an einen Simultandolmetscher, denn an eine hochqualitative Übersetzung ala DeepL.

Dennoch ist das Ergebnis oft erstaunlich. So behielt ein Amerikaner bei uns in der deutschen Aussprache (s)einen amerikanischen Dialekt, was den Clip deutlich authentischer machte, als eine typische, cleane deutsche KI-Aussprache. Und auch trotz seiner offensichtlichen Schwächen gibt es wahrscheinlich bereits ein paar passende Anwendungsfälle für das neue Tool. Beispielsweise, wo der sprachliche Inhalt nicht sonderlich komplex ist und die Sätze relativ kurz ausfallen...

In diesem Beispiel sieht man das KI-Dubbing im praktischen Einsatz und kann durch die Auswahl der Audiospur in Youtube zwischen den generierten Sprachen wechseln...


Link mehr Informationen bei elevenlabs.io

  
[noch keine Leserkommentare] [Kommentar schreiben]   

  Vorige News lesen Nächste News lesen 
bild7Artisans stellt 9mm f/5.6 Asph Fullframe Ultraweitwinkel-Objektiv für E/L/R und Z-Mount vor bildSchlägt Meta Stable Diffusion XL mit Ästhetik? Emu trainiert "vom Feinsten"


verwandte Newsmeldungen:
Sound:

Adobe-KI zerlegt Audioclip in verschiedene Spuren - Project Sound Lift 17.November 2023
Aus Text wird nun auch Audio: Stable Audio generiert Musik und Soundeffekte per KI 18.September 2023
Grass Valley kündigt EDIUS 11 an mit KI-Funktionen, neuem Audio Editor und mehr 15.September 2023
Wenn du nur 1 Mikro wählen könntest: Richtrohr, kompaktes Kondensator oder Lavalier? 29.August 2023
YouTube integriert automatisches Audio-Dubbing per KI 31.Juli 2023
RØDE PodMic USB: Studio-Mikrofon mit XLR und USB 25.Mai 2023
Professionellere RED KOMODO-X vorgestellt mit 6K 80p und Mikro-V-Lock 17.Mai 2023
alle Newsmeldungen zum Thema Sound

KI:

Meta Emu KI-Bildgenerator - online kostenlos, jedoch aktuell nur in den USA 7.Dezember 2023
SDXL-Turbo - Neuer KI-Algorithmus beschleunigt Stable Diffusion extrem 6.Dezember 2023
PIKA 1.0 angekündigt - Generative KI-Videos mit erstaunlicher Qualität 29.November 2023
Der nächste Schritt ist da: KI trainiert KI (und braucht den Menschen nicht mehr) 28.November 2023
Insta360 Ace Pro - Action Cam mit 8K-Sensor, Leica Optik und viel KI 24.November 2023
Stable Video Diffusion - Freies KI-Diffusionsmodell zur Videoerzeugung vorgestellt 23.November 2023
Boris FX: Continuum bekommt KI-Funktionen - Denoiser und Upscaler 21.November 2023
alle Newsmeldungen zum Thema KI


[nach oben]

















passende Forenbeiträge zur News:

Archive

2023

Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2022
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 7.Dezember 2023 - 15:15
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*