Logo Logo
/// News

KI trennt Musik in separate Gesangs- und Begleitmusik-Tonspuren

[16:09 Mo,20.September 2021 [e]  von ]    

bildEin Team vom AI Lab von ByteDance, der Muttergesellschaft von TikTok, hat eine neue, auf neuronalen Netzen basierende Methode vorgestellt, um Musikaufnahmen in mehrere einzelne Tonspuren zu zerlegen. Das folgende Beispiel demonstriert eindrücklich, was der neue Algorithmus vermag: er kann ziemlich sauber die Gesangsspur von der musikalischen Begleitung trennen oder auch das Schlagzeug oder den Bass - und die Musik ohne Bass und Schlagzeug anspielen.





Einsetzen läßt sich die Methode für verschiedene Zwecke: natürlich ist sie perfekt zum Remixen von Musik, wenn man nicht über die einzelnen Spuren der Originalaufnahme verfügt - bei Gesangsaufnahmen in Videos könnten so theoretisch auch nachträglich noch die Stimmen in einer anderen Sprache gedubbt werden. Interessant wäre ein Versuch, ob der Algorithmus auch in der Lage ist, Stimmen aus Aufnahmen vor einer Geräuschkulisse zu extrahieren - er ließe sich dann wie ein intelligenter Rauschfilter nutzen, um nachträglich klarere Aufnahmen zu produzieren.

Wie immer steht der Python-Programmcode für Kundige zum Download und für eigene Tests bereit. User können so Songs in die verschiedene Tonspuren aufteilen und auch ihre eigenen Systeme zur Trennung von Musikquellen mit diesem Repository trainieren. Dieses Repository umfasst auch Sprachverbesserung, Instrumententrennung usw.

Wer nicht über die erforderlichen Kenntnisse verfügt, kann den Algorithmus hier mit einem kleinen Audioschnipsel seiner Wahl selbst ausprobieren (als Input wird eine maximal 10 Sekunden lange Sounddatei im .Wav-Format benötigt) - bei unserem Test hat die Trennung in Stimm- und Begleitspur sehr gut funktioniert.


Musik separieren zum selbst ausprobieren

Link mehr Informationen bei arxiv.org

  
[7 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
Bluboy    18:00 am 21.9.2021
Isolated Tracks sind auf Youtube zu Hauff allerdings keine Konkurenz zu echten Multitracks
medienonkel    16:54 am 21.9.2021
Kleiner Nachtrag, weil im Artikel ja der Wunsch nach einer Bearbeitung eines O-Tones kurz angesprochen wurde. Auch dafür gibt es in RX8 eine separate Funktion. Stimmoptimierung...weiterlesen
medienonkel    19:42 am 20.9.2021
Ich möchte die Euphorie ja nicht unnötig schmälern, aber das gibt es schon länger als kommerzielles Produkt. https://www.izotope.com/en/products/rx/features.html Musical...weiterlesen
[ Alle Kommentare ganz lesen]

  Vorige News lesen Nächste News lesen 
bildKostenlose Roland AeroCaster Switcher App für iPads mixt 5 kabellose Videpoinputs bildAputure stellt helles Nova P600c RGBWW LED Soft Panel mit 600W vor


verwandte Newsmeldungen:
Sound:

Apple: Final Cut Pro 10.6 und Logic Pro 10.7 mit neuen Funktionen und M1 Pro, M1 Max Update 19.Oktober 2021
SmallRig Forevala L20: Preiswertes Lavalier Mikro 25.September 2021
Roland V-02HD MK II Streaming Video Mixer vorgestellt 19.September 2021
Vimeo unterstützt ab sofort Dolby Vision HDR vom iPhone 12 13.September 2021
Tascam bringt XLR-Blitzschuh-Adapter für Canon, Nikon und Fujifilm DSLMs 19.August 2021
Sound Devices A20-Mini: Professioneller drahtloser Audiosender mit 32-Bit Float Aufnahme 23.Juli 2021
Audio Design Desk 1.7: Echtzeit-Editing Tool für SFX jetzt mit DAW Synchronisation 18.Juli 2021
alle Newsmeldungen zum Thema Sound

Machine Learning:

fylm.ai: Professionelles KI-gestütztes Color Grading im Browser 16.Oktober 2021
KI lernt kämpfen - und synthetisiert neue Martial Arts Moves 10.Oktober 2021
Perfekt für Musikvideos: Räumliches, objektbasiertes Videoediting per KI und 16 Kameras 19.September 2021
Nvidia Broadcast App 1.3: Besseres Livestreaming und Videokonferenzen per KI 6.September 2021
Omnimatte: Nahezu perfekte Masken bewegter Objekte per KI 27.August 2021
Per DeepFake selbst im Filmtrailer von "Reminiscene" mit Hugh Jackman mitspielen 22.August 2021
Nvidias KI erschafft noch realistischere Animationen von künstlichen Gesichtern 27.Juli 2021
alle Newsmeldungen zum Thema Machine Learning

Film:

FiLMiC Pro v6.17 unterstützt schon ProRes-Aufnahmen auf dem iPhone 13 Pro + Max 5.Oktober 2021
Wie man eine Netflix-Doku über ein beliebiges Thema macht 3.Oktober 2021
CAME-TV Power Station: Duales V-Mount-Akkuladegerät und Wechselstromrichter in einem 29.September 2021
Kostenlose Filme auf VHS oder DVD für Alle? FreeBlockbuster.org 12.September 2021
Zu viele Unfälle: Top-Kameraleute in Hollywood fordern kürzere Drehtage 29.August 2021
Dokumentarfilm-Festival Longshots: Filme kostenlos anschauen und abstimmen 26.August 2021
CAME-TV: Fernsteuerbarer Slider für DJI RS2 Gimbal mit 3.47 Meter Schiene 11.August 2021
alle Newsmeldungen zum Thema Film


[nach oben]

















passende Forenbeiträge zur News:

Archive

2021

Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2020
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 19.Oktober 2021 - 18:02
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*