Logo Logo
/// News

Meta Encodec komprimiert mit KI Audio-Dateien deutlich stärker als MP3

[11:20 Mo,21.November 2022 [e]  von ]    

Das klingt spannend: Meta / Facebook Research haben einen KI-basierten Audio-Codec namens Encodec vorgestellt, der es (zumindest auf dem Forschungspapier) wahrlich in sich hat. Dieser soll gegenüber MP3-Dateien gerade bei sehr geringen Datenraten bei vergleichbarer Qualität noch einmal eine um den Faktor 10 bessere Kompression erzielen.

Dies würde bedeuten, dass sich hiermit MP3-Audiodateien noch einmal durchschnittlich auf ein Zehntel ihres Datenspeicherbedarfs reduzieren ließen. Dies hätte wiederum enorme Auswirkungen auf offline Speicherung und Audio-Streaming.

Der Aufbau von Encodec erinnert dabei stark an typische VACs/GANs. Der Kompressor erzeugt Samples, die ein folgender Diskriminator als echt oder rekonstruiert klassifiziert. Das Kompressionsmodell modifiziert daraufhin seinen Output so lange, bis der Diskriminator alle Samples für echt hält. Gleichzeitig lernt der Diskriminator auch immer verlässlicher "echt" von "rekonstruiert" zu unterscheiden. Dieses Wechselspiel perfektioniert die Audioqualität anschließend bei minimalem Dateneinsatz im Modell.



encodec
Der Aufbau von Encodec (Bildquelle: Meta)



Laut Meta könne Encodec so Audio mit niedriger Bitrate (64 kb/s) ohne Qualitätsverlust rekonstruieren und habe zudem noch Potenzial für weitere Verbesserungen. So trainierte man zusätzlich ein Transformer-basiertes Sprachmodell, das bei gleichbleibender Qualität weitere 40 Prozent Bandbreite einsparen könnte, wenn die Latenz wie beim Streaming nicht entscheidend sei. Anders gesagt, wenn der Encoder nicht in Echtzeit arbeiten muss, sind für MP3-Audio-Anwendungen noch größere Kompressionsgewinne möglich.

Spezielle Hardware ist für den Einsatz interessanterweise ebenfalls nicht notwendig. Ein einzelner CPU-Kern soll zum En- und Decoding mit dem neuen Verfahren in Echtzeit ausreichen.

Und damit immer noch nicht genug. Meta hat angekündigt, mit KI in einem kommenden Forschungsvorhaben auch Video effektiver komprimieren zu wollen.

Link mehr Informationen bei github.com

  
[2 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
cantsin    17:33 am 21.11.2022
Wenn's um Streaming geht, ist jedes eingesparte Bit ein handfester Vorteil (hinsichtlich Bandbreite, Serverkapazität, Energiekosten etc.). Wobei mp3 ja mittlerweile ein 31...weiterlesen
teichomad    17:04 am 21.11.2022
MP3 Dateigrößen waren ein Problem ?
[Kommentare ganz lesen]

  Vorige News lesen Nächste News lesen 
bildARRI Rental stellt mit HEROES weitere LF Objektiv-Kollektion vor: T.One und LOOK bildUmfrage unter 1.000 Fotografen (Pros und Amateure): Welche Kamera nutzt ihr?


verwandte Newsmeldungen:
Sound:

Adobe-KI zerlegt Audioclip in verschiedene Spuren - Project Sound Lift 17.November 2023
ElevenLabs - KI-Dubbing Audio Übersetzung als Web-Service 15.Oktober 2023
Aus Text wird nun auch Audio: Stable Audio generiert Musik und Soundeffekte per KI 18.September 2023
Grass Valley kündigt EDIUS 11 an mit KI-Funktionen, neuem Audio Editor und mehr 15.September 2023
Wenn du nur 1 Mikro wählen könntest: Richtrohr, kompaktes Kondensator oder Lavalier? 29.August 2023
YouTube integriert automatisches Audio-Dubbing per KI 31.Juli 2023
RØDE PodMic USB: Studio-Mikrofon mit XLR und USB 25.Mai 2023
alle Newsmeldungen zum Thema Sound

KI:

Meta Emu KI-Bildgenerator - online kostenlos, jedoch aktuell nur in den USA 7.Dezember 2023
SDXL-Turbo - Neuer KI-Algorithmus beschleunigt Stable Diffusion extrem 6.Dezember 2023
PIKA 1.0 angekündigt - Generative KI-Videos mit erstaunlicher Qualität 29.November 2023
Der nächste Schritt ist da: KI trainiert KI (und braucht den Menschen nicht mehr) 28.November 2023
Insta360 Ace Pro - Action Cam mit 8K-Sensor, Leica Optik und viel KI 24.November 2023
Stable Video Diffusion - Freies KI-Diffusionsmodell zur Videoerzeugung vorgestellt 23.November 2023
Boris FX: Continuum bekommt KI-Funktionen - Denoiser und Upscaler 21.November 2023
alle Newsmeldungen zum Thema KI


[nach oben]

















passende Forenbeiträge zur News:

Archive

2023

Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2022
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 9.Dezember 2023 - 15:02
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*