Logo Logo
/// News

Frische KI-Audio Modelle selbst ausprobieren - Deep Learning Tools for Audacity

[10:27 Sa,30.Oktober 2021 [e]  von ]    

Ein paar DeepLearnig Experten haben eine -in unseren Augen- extrem gute Idee ausgefuchst und kostenlos über GitHub bereitgestellt. Die "Deep Learning Tools for Audacity" sind ein Software-Framework, mit dem Deep-Learning-Forscher ihre eigenen PyTorch-Modelle einfach in die Open-Source-DAW Audacity integrieren können. Dadurch können die Werkzeuge und Modelle der KI-Audioforscher von jedermann ausprobiert und bedient werden.

Audacity ist eine kostenlose und quelloffene Digital Audio Workstation (DAW), die seit 2015 über 100 Millionen Downloads für sich beanspruchen kann. Also Audio Editor ist Audacity auch unter Videobarbeitern recht beliebt, zumal es das Programm für alle relevanten Betriebssysteme gibt.



Mit dem Software-Framework "Deep Learning Tools for Audacity" können Entwickler ihr trainiertes PyTorch-Modell in den Model Hub von HuggingFace hochladen, einer der größten KI-Model Datenbanken im Internet. Anschließend ist das Modell über die Benutzeroberfläche von Audacity zugänglich und kann ähnlich wie herkömmliche Plug-ins geladen werden:

DL_Audacity



In einem eigenen arxiv-Paper/PDF zeigen die Entwickler einige Anwendungsbeispiele sowohl für Endnutzer als auch für Entwickler neuronaler Netzwerke auf.

Um das ganze selbst auszuprobieren, muss man (noch) eine spezielle Version von Audacity herunterladen, da das Framework noch nicht in die Hauptversion von Audacity integriert wurde. Laut den Entwicklern soll das Feature jedoch schon bald in der Hauptversion landen - wer den Fortschritt verfolgen will, kann sich auf Github den entsprechenden Pull-Request ansehen. Der Download der speziellen Alpha-Version findet sich auf der verlinkten Entwicklerseite für PC und Mac (jedoch unverständlicherweise nicht für Linux).

In unseren Augen ist dies eine extrem spannende Entwicklung, die wir uns auch für Videobearbeitungssoftware dringend wünschen würden. Darum liebe Software-Hersteller, jetzt bitte auch etwas vergleichbares für Videosoftware, ein ONNX-Importer würde uns fürs erste schon genügen...

Link mehr Informationen bei interactiveaudiolab.github.io

  
[1 Leserkommentar] [Kommentar schreiben]   Letzter Kommentar:
mash_gh4    11:21 am 30.10.2021
im nuke sind derartige möglichkeiten seit zwei-drei jahren vorhanden. (https://www.fxguide.com/fxfeatured/new- ... g-in-nuke/) leider sieht man dort aber auch, dass das ganz so...weiterlesen
[Kommentar ganz lesen]

  Vorige News lesen Nächste News lesen 
bildVideostabilisierer ReelSteady 2.0 kommt 2022 im GoPro Player bildTilta Kamera Cage und Filtermodule für die DJI Action 2 Kamera


verwandte Newsmeldungen:
Sound:

Bluetooth LE Audio bringt viel bessere Soundqualität und endlich einen Broadcast-Modus 16.Juli 2022
Xiaomi 12S Ultra: Leica-Kamera mit 1" Sensor und 10bit HDR-Aufnahme in Dolby Vision 5.Juli 2022
Blackmagic Pocket Cinema Camera 6K G2 - Größerer Akku, 2x XLR und Klappdisplay 23.Juni 2022
Zhiyun Weebill 3: Einhand-Gimbal für DSLRs und DSLMs jetzt mit integriertem Licht und Mikro 16.Juni 2022
Tascam und Atomos: Synchronisation per Funk für Audiorecorder Portacapture X8 5.Juni 2022
RØDECaster Pro II: aktualisiertes All-In-One Audio Production Studio 25.Mai 2022
Firmware-Update für DJI Mic bringt Verbesserungen 19.Mai 2022
alle Newsmeldungen zum Thema Sound

Machine Learning:

KI statt Greenscreen: Videohintergründe per Kommandozeile ändern 13.August 2022
DeepFaceVideoEditing: KI ermöglicht das Ändern von Gesichtsausdrücken in Videos 11.August 2022
Neue KI stellt Objekte aus Photos automatisch perfekt frei 7.August 2022
KI-basierte Grading-Lösung fylm.ai v1.3 lernt ein bißchen Kontext 26.Juli 2022
Jeder kann Kunst: Metas neue KI erstellt Bilder auf Wunsch 19.Juli 2022
Videostabilisierung: Mercalli V6 SAL erschienen mit KI-Unterstützung 18.Juli 2022
KI revolutioniert die Photographie: Objektbasiertes Editing mit Hilfe von DALL-E 2 30.Juni 2022
alle Newsmeldungen zum Thema Machine Learning


[nach oben]

















passende Forenbeiträge zur News:

Archive

2022

August - Juli - Juni - Mai - April - März - Februar - Januar

2021
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 14.August 2022 - 15:02
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*