Logo Logo
/// News

Schönere Zeitrafferaufnahmen durch neue NVIDIA-KI

[12:37 Sa,11.Februar 2023 [e]  von ]    

Zeitraffersequenzen über lange Zeiträume können Veränderungen sichtbar machen, die mit dem bloßen Auge nicht wahrgenommen werden können, weil sie zu langsam verlaufen, wie etwa der Wandel einer Landschaft im Laufe der Jahreszeiten. So lassen sich magische Bilder erzeugen, allerdings sind solche Aufnahmen - wenn sie in der freien Natur erfolgen - in der Regel nicht perfekt, da sie einer ganzen Reihe von nicht kontrollierbaren Einflüssen unterliegen, die im resultierenden Zeitraffervideo stören. So erzeugt die sich durch Tageszeit und Wetter ständig ändernde Beleuchtung einer Szene samt Schattenwurf oft ein irritierendes Flimmern. Zusätzlich gibt es manchmal stark aus dem Rahmen fallende Bilder, die ganz anders als die vorhergehenden oder folgenden Bilder aussehen - zum Beispiel wegen Objekten, die manchmal vor der Kamera stehen.



springsummerwinterfall
Alle vier Jahreszeiten gleichzeitig in einem Zeitrafferclip



Nvidias neuer KI-Algorithmus bietet jetzt eine Lösung genau für solche Probleme. Besonders bei sehr lange laufenden Zeitrafferaufnahmen, die über mehrere Jahre gehen (zum Beispiel bei Archivfootage von fest installierten Webcams, die eine Landschaft zeigen), ist er hilfreich: er bereinigt nicht nur störende Wechsel der Lichtverhältnisse durch Wetterwechsel und die Tageszeiten, sondern auch andere Effekte und glättet die ganze Zeitraffersequenz, ohne Bilddetails zu verlieren.

Hier die Vorstellung des Algorithmus durch 2 Minute Papers:


Der auf NVIDIAs StyleGAN3 basierende Deep Learning Algorithmus erlaubt sogar die Kontrolle über verschiedene Aspekte der Änderungen, welche während des Aufnahmezeitraums stattfinden. So kann zum Beispiel festgelegt werden, dass das Wetter oder die Tageszeit im Clip konstant bleibt und nur gezielt Änderungen gezeigt werden, die bestimmte Bildelemente betrifft. Es können zum Beispiel auch die Änderungen durch vier Jahreszeiten gleichzeitig in einem Clip angezeigt werden, wie auf der Projektseite demonstriert.

Control-Time-of-day
Programmoberfläche


Der Programmcode nutzt die Rechenpower von Grafikkarten per CUDA und steht samt Modell online bereit zum Ausprobieren, allerdings ist etwas Vorwissen gefragt. Da Nvidia schon oft interessante KI-Forschungsprojekte ziemlich schnell in der Öffentlichkeit zugänglich gemacht hat, um seine GPUs zu promoten, ist es gut möglich, dass es den obigen Zeitrafferalgorithmus bald auch in Form eines einfach zu bedienenden kostenlosen Tools gibt.

Hier das etwas längere Video, in welchem das Verfahren vorgestellt wird:


Link mehr Informationen bei github.com

  
[noch keine Leserkommentare] [Kommentar schreiben]   

  Vorige News lesen Nächste News lesen 
bildLightworks 2023 mit flexibler Oberfläche, HDR-Workflows und Masken bildRohschnitt aus Transkript generieren - Text-basiertes Editing in Premiere Pro (Beta)


verwandte Newsmeldungen:
KI:

Inspirierende KI-Bild-Variationen per Mausklick mit Stable Diffusion Reimagine / unCLIP 31.März 2023
Insta360 Flow - Smartphone-Stabilisator mit KI-Tracking vorgestellt 29.März 2023
Runway Gen-1 jetzt verfügbar- teurer KI-Videogenerator für die ersten Schritte 28.März 2023
So sehen die per KI generierten Gewinnerfilme des Runway KI-Filmfestivals aus 27.März 2023
Wie man einen Videoclip mit KI-Tools produziert - in nur 3 Stunden 24.März 2023
Microsoft mit generativen KI-Modellen für jedermann im Browser - Bing Image Creator 23.März 2023
Adobe kündigt Firefly an: Generative KI-Modelle nun direkt von Adobe 21.März 2023
alle Newsmeldungen zum Thema KI

Computer:

NVIDIA spendiert seinen GPUs heimlich noch mehr parallele Videoencodings 30.März 2023
VideoFusion: Erste Open Source Video-KI ist da - und läuft auch auf dem Heim-PC 20.März 2023
Apple: Neue Macs vor dem Start - kommt endlich der neue Mac Pro mit M2 Ultra? 10.März 2023
Neue Nvidia-KI generiert Bilder 30x schneller als Stable Diffusion 8.März 2023
Chrome, Firefox und VLC profitieren: FFmpeg 6.0 bringt u.a. AV1-Decoding per GPU 1.März 2023
Kostenloses KI-Tool NVIDIA Canvas: Fotorealistische Traumlandschaften selbst gestalten 15.Februar 2023
Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter? 25.Januar 2023
alle Newsmeldungen zum Thema Computer

Filmen:

Drohnenunfall bei Netflix-Dreh: Schauspieler im Gesicht verletzt 4.Februar 2023
Oscars 2023: Mit welchen Kameras wurden die nominierten Filme gedreht? 29.Januar 2023
Der totale Remix: Neue KI Tune-A-Video macht neue Videos aus alten Clips 24.Januar 2023
Foto-Shooting plus KI: Schaut so die Zukunft der Fotografie aus? 27.Dezember 2022
Dramatron: KI erstellt aus Plot-Prompts Drehbücher mitsamt Dialogen 11.Dezember 2022
Nikon Z: Fernsteuerungshandgriff MC-N10 für ergonomischeres Filmen 3.November 2022
Neu: Clips aus längeren Videos einfach für YouTube Shorts ausspielen 8.August 2022
alle Newsmeldungen zum Thema Filmen


[nach oben]

















passende Forenbeiträge zur News:

Archive

2023

März - Februar - Januar

2022
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 31.März 2023 - 12:07
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*