Logo Logo
/// News

Neuronales Netz DAIN interpoliert Stop-Motion Frames

[14:47 Mi,9.September 2020 [e]  von ]    

Auch das war zu erwarten. Nachdem sich mittlerweile Neuronale Netze in vielen Bereichen durch das natürliche Ergänzen fehlender Informationen hervortun lag ein Versuch mit Stop-Motion Material ja quasi auf der Hand.

Und so hat der Stop MotionStop Motion im Glossar erklärt Animator (und KI-Scientist) LegoEddy einmal ein spezielles KI-Modell zur Frameinterpolation (DAIN) auf seine (mit 15 fps) selbst animierten Lego-Stop-Motion Clips angewendet.



DAIN darf dabei aktuell zur State-of-The-Art Frame-Interpolation gezählt werden, weil es sowohl Objekt-Überdeckungen als auch Tiefeninformationen ohne zusätzliche Anwender Interaktion gut erkennt.

KIStopmotion



Das Ergebnis überrascht dann sogar in zweierlei Hinsicht. Einerseits, weil die erzielte Qualität der Interpolation wirklich auf extrem hohem Niveau gelingt und nur sehr vereinzelt schlecht aufgelöste ArtefakteArtefakte im Glossar erklärt zu sehen sind. Und auf der anderen Seite, weil man eine Stop-Motion Motion Animation mit 60 fps einfach nicht gewohnt ist und dies einen komplett neuen Seheindruck erzeugt. Ob dieser neue Eindruck dann letztlich auch besser ist, liegt buchstäblich im Auge des Betrachters. Aber es zeigt ein weiteres mal, wie KI-Modelle in Zukunft die Prozesse beim Film komplett umkrempeln werden.

In seinem Video beschreibt LegoEddy noch ein paar HIntergründe zu DAIN - unter anderem auch wie man es komplett kostenlos für eigenen Projekte nutzen kann. Und im Video findet sich ein Link auf (s)einen kompletten Lego-Film, der von 15fps auf 60 Bilder pro Sekunde hochgerechnet wurde.



Viel Vergnügen beim Staunen...

Link mehr Informationen bei www.youtube.com

  
[13 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
meer    08:48 am 12.9.2020
Wir 3dler können das schon lange 😎
srone    22:05 am 11.9.2020
zum schluss drehen wir in sd, dain und tecogan werdens schon richten...;-) wie recht hatte wowu, als er all dies prophezeit hatte, die wahre abbildung der realität interessiert...weiterlesen
meer    21:26 am 11.9.2020
Auch für 3d Artisten sehr wertvoll, gerade bei renderzeiten von 10+ Min. pro frame,dass teste ich gerade mal 🤪🙃
[ Alle Kommentare ganz lesen]

  Vorige News lesen Nächste News lesen 
bildGerüchte um GoPro Hero 9 Black: Farbiges Frontdisplay und 20 Megapixel Sensor bildSmooth-XS: Neuer Smartphone Gimbal von Zhiyun fungiert auch als intelligenter Selfie Stick


verwandte Newsmeldungen:
Grundlagen:

Googles neuer Super-Resolution Algorithmus SR3 skaliert Gesichter nahezu perfekt hoch 14.Juli 2021
Neuer Dell UltraSharp U4021QW: 40 Zoll Monitor mit 5K Auflösung und Thunderbolt 3 6.Januar 2021
Zoom F2 Field Recorder - Audio-Zwerg mit 32-Bit-Float-Technologie 11.November 2020
TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer 6.September 2020
Gigabyte G34WQC 34" Monitor: 3.440 x 1.440 Pixel Auflösung und 90% DCI-P3 18.August 2020
Canon EOS R5 und R6 vorgestellt - Stabilisiertes Vollformat bis 8K RAW mit Dual Pixel AF 9.Juli 2020
8K und Dual Pixel AF in Samsungs neuem ISOCELL GN1 Smartphone-Kamerasensor 25.Mai 2020
alle Newsmeldungen zum Thema Grundlagen

Machine Learning:

fylm.ai: Professionelles KI-gestütztes Color Grading im Browser 16.Oktober 2021
KI lernt kämpfen - und synthetisiert neue Martial Arts Moves 10.Oktober 2021
KI trennt Musik in separate Gesangs- und Begleitmusik-Tonspuren 20.September 2021
Perfekt für Musikvideos: Räumliches, objektbasiertes Videoediting per KI und 16 Kameras 19.September 2021
Nvidia Broadcast App 1.3: Besseres Livestreaming und Videokonferenzen per KI 6.September 2021
Omnimatte: Nahezu perfekte Masken bewegter Objekte per KI 27.August 2021
Per DeepFake selbst im Filmtrailer von "Reminiscene" mit Hugh Jackman mitspielen 22.August 2021
alle Newsmeldungen zum Thema Machine Learning


[nach oben]

















passende Forenbeiträge zur News:

Archive

2021

Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2020
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 25.Oktober 2021 - 15:02
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*