Logo Logo
/// News

KI trennt Musik in separate Gesangs- und Begleitmusik-Tonspuren

[16:09 Mo,20.September 2021 [e]  von ]    

bildEin Team vom AI Lab von ByteDance, der Muttergesellschaft von TikTok, hat eine neue, auf neuronalen Netzen basierende Methode vorgestellt, um Musikaufnahmen in mehrere einzelne Tonspuren zu zerlegen. Das folgende Beispiel demonstriert eindrücklich, was der neue Algorithmus vermag: er kann ziemlich sauber die Gesangsspur von der musikalischen Begleitung trennen oder auch das Schlagzeug oder den Bass - und die Musik ohne Bass und Schlagzeug anspielen.





Einsetzen läßt sich die Methode für verschiedene Zwecke: natürlich ist sie perfekt zum Remixen von Musik, wenn man nicht über die einzelnen Spuren der Originalaufnahme verfügt - bei Gesangsaufnahmen in Videos könnten so theoretisch auch nachträglich noch die Stimmen in einer anderen Sprache gedubbt werden. Interessant wäre ein Versuch, ob der Algorithmus auch in der Lage ist, Stimmen aus Aufnahmen vor einer Geräuschkulisse zu extrahieren - er ließe sich dann wie ein intelligenter Rauschfilter nutzen, um nachträglich klarere Aufnahmen zu produzieren.

Wie immer steht der Python-Programmcode für Kundige zum Download und für eigene Tests bereit. User können so Songs in die verschiedene Tonspuren aufteilen und auch ihre eigenen Systeme zur Trennung von Musikquellen mit diesem Repository trainieren. Dieses Repository umfasst auch Sprachverbesserung, Instrumententrennung usw.

Wer nicht über die erforderlichen Kenntnisse verfügt, kann den Algorithmus hier mit einem kleinen Audioschnipsel seiner Wahl selbst ausprobieren (als Input wird eine maximal 10 Sekunden lange Sounddatei im .Wav-Format benötigt) - bei unserem Test hat die Trennung in Stimm- und Begleitspur sehr gut funktioniert.


Musik separieren zum selbst ausprobieren

Link mehr Informationen bei arxiv.org

  
[7 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
Bluboy    18:00 am 21.9.2021
Isolated Tracks sind auf Youtube zu Hauff allerdings keine Konkurenz zu echten Multitracks
medienonkel    16:54 am 21.9.2021
Kleiner Nachtrag, weil im Artikel ja der Wunsch nach einer Bearbeitung eines O-Tones kurz angesprochen wurde. Auch dafür gibt es in RX8 eine separate Funktion. Stimmoptimierung...weiterlesen
medienonkel    19:42 am 20.9.2021
Ich möchte die Euphorie ja nicht unnötig schmälern, aber das gibt es schon länger als kommerzielles Produkt. https://www.izotope.com/en/products/rx/features.html Musical...weiterlesen
[ Alle Kommentare ganz lesen]

  Vorige News lesen Nächste News lesen 
bildKostenlose Roland AeroCaster Switcher App für iPads mixt 5 kabellose Videpoinputs bildAputure stellt helles Nova P600c RGBWW LED Soft Panel mit 600W vor


verwandte Newsmeldungen:
Sound:

Zoom UAC-232 USB Audio Converter: 32-Bit-Float-Audio macht Gain Regler überflüssig 26.Februar 2023
RØDE NT1 5th Generation - Studio-Mikrofon jetzt mit XLR/USB-C und 32 Bit Floating-Point 21.Februar 2023
Neue Audio KI generiert neben Musik auch beliebige Soundeffekte 2.Februar 2023
Tascam Portacapture X6 - mobiler 6-Spur Audiorecorder mit XLR und 32Bit-Float vorgestellt 30.Januar 2023
Erst Bilder, dann Sounds: Neue Google-KI generiert beliebige Musik nach Textbeschreibung 30.Januar 2023
DJI Mic: Kompaktes Drahtlos-Mikrofonsystem jetzt auch in billigerer Solo-Version 13.Januar 2023
Meta Encodec komprimiert mit KI Audio-Dateien deutlich stärker als MP3 21.November 2022
alle Newsmeldungen zum Thema Sound

Machine Learning:

Adobe kündigt Firefly an: Generative KI-Modelle nun direkt von Adobe 21.März 2023
Runway Gen2: Stable Diffusion Schöpfer stellen neue Text-to-Video-KI vor 20.März 2023
VideoFusion: Erste Open Source Video-KI ist da - und läuft auch auf dem Heim-PC 20.März 2023
Bild-KI Midjourney V5 liefert fotorealistische Bilder - und endlich auch korrekte Hände 19.März 2023
KI verwandelt WLAN Router in Raum-Radar 18.März 2023
Gilt das Urheberrecht auch für per KI erzeugte Inhalte? Eher nicht 17.März 2023
Wonder Studio: Virtuelle Figuren einfach und billig per KI in Filme integrieren 12.März 2023
alle Newsmeldungen zum Thema Machine Learning

Film:

Ruinieren schlechte Projektionen das Kino? 19.März 2023
Wonder Studio: Virtuelle Figuren einfach und billig per KI in Filme integrieren 12.März 2023
Projektoren adé? LG kündigt Miraclass LED-Wand für Kinos an 15.Februar 2023
Kein Anschluss unter diesen Nummern - Fiktive Telefonnummern extra für Film&Fernsehen 14.Februar 2023
Oscars 2023: Mit welchen Kameras wurden die nominierten Filme gedreht? 29.Januar 2023
Sony Future Filmmaker Awards 2023: Hier sind die Trailer der Shortlist ... 28.Januar 2023
DZO Film komplettiert günstige Vollformat Cine-Zoom Serie Catta Ace mit 18-35mm T2.9 17.Januar 2023
alle Newsmeldungen zum Thema Film


[nach oben]

















passende Forenbeiträge zur News:

Archive

2023

März - Februar - Januar

2022
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 21.März 2023 - 15:39
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*