Logo Logo
/// News

Neuronales Netz DAIN interpoliert Stop-Motion Frames

[14:47 Mi,9.September 2020 [e]  von ]    

Auch das war zu erwarten. Nachdem sich mittlerweile Neuronale Netze in vielen Bereichen durch das natürliche Ergänzen fehlender Informationen hervortun lag ein Versuch mit Stop-Motion Material ja quasi auf der Hand.

Und so hat der Stop Motion Animator (und KI-Scientist) LegoEddy einmal ein spezielles KI-Modell zur Frameinterpolation (DAIN) auf seine (mit 15 fps) selbst animierten Lego-Stop-Motion Clips angewendet.

DAIN darf dabei aktuell zur State-of-The-Art Frame-Interpolation gezählt werden, weil es sowohl Objekt-Überdeckungen als auch Tiefeninformationen ohne zusätzliche Anwender Interaktion gut erkennt.



KIStopmotion



Das Ergebnis überrascht dann sogar in zweierlei Hinsicht. Einerseits, weil die erzielte Qualität der Interpolation wirklich auf extrem hohem Niveau gelingt und nur sehr vereinzelt schlecht aufgelöste Artefakte zu sehen sind. Und auf der anderen Seite, weil man eine Stop-Motion Motion Animation mit 60 fps einfach nicht gewohnt ist und dies einen komplett neuen Seheindruck erzeugt. Ob dieser neue Eindruck dann letztlich auch besser ist, liegt buchstäblich im Auge des Betrachters. Aber es zeigt ein weiteres mal, wie KI-Modelle in Zukunft die Prozesse beim Film komplett umkrempeln werden.

In seinem Video beschreibt LegoEddy noch ein paar HIntergründe zu DAIN - unter anderem auch wie man es komplett kostenlos für eigenen Projekte nutzen kann. Und im Video findet sich ein Link auf (s)einen kompletten Lego-Film, der von 15fps auf 60 Bilder pro Sekunde hochgerechnet wurde.



Viel Vergnügen beim Staunen...

Link mehr Informationen bei www.youtube.com

  
[13 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
meer    08:48 am 12.9.2020
Wir 3dler können das schon lange 😎
srone    22:05 am 11.9.2020
zum schluss drehen wir in sd, dain und tecogan werdens schon richten...;-) wie recht hatte wowu, als er all dies prophezeit hatte, die wahre abbildung der realität interessiert...weiterlesen
meer    21:26 am 11.9.2020
Auch für 3d Artisten sehr wertvoll, gerade bei renderzeiten von 10+ Min. pro frame,dass teste ich gerade mal 🤪🙃
[ Alle Kommentare ganz lesen]

  Vorige News lesen Nächste News lesen 
bildGerüchte um GoPro Hero 9 Black: Farbiges Frontdisplay und 20 Megapixel Sensor bildSmooth-XS: Neuer Smartphone Gimbal von Zhiyun fungiert auch als intelligenter Selfie Stick


verwandte Newsmeldungen:
Grundlagen:

Lenovo ThinkVision M14d: Mobiler USB-C 14" Monitor mit 2.2K Auflösung angekündigt 8.März 2022
Zoom F3 - professioneller Mini Field Recorder mit XLR und 32-Bit-Float 19.Januar 2022
LG DualUp: nahezu quadratischer Monitor mit 2.560 x 2.880 Auflösung 28.Dezember 2021
Sony zeigt neuartige Stacked CMOS-Bildsensor-Technologie mit besserer Dynamik 19.Dezember 2021
Googles neuer Super-Resolution Algorithmus SR3 skaliert Gesichter nahezu perfekt hoch 14.Juli 2021
Neuer Dell UltraSharp U4021QW: 40 Zoll Monitor mit 5K Auflösung und Thunderbolt 3 6.Januar 2021
Zoom F2 Field Recorder - Audio-Zwerg mit 32-Bit-Float-Technologie 11.November 2020
alle Newsmeldungen zum Thema Grundlagen

Machine Learning:

Nur Sternenlicht als Beleuchtung: Neuer KI-Algorithmus entrauscht Videos perfekt 16.Mai 2022
NAB 2022 Tutorialclip: DaVinci Resolve 18 - AI-Mask Objects, Depth Mask, Surface Tracker 27.April 2022
KI hilft beim Nachsynchronisieren von Kinofilm "The Champion" 16.April 2022
Apple Final Cut Pro Update bringt Duplikat-Erkennung und Voice Isolation per KI 13.April 2022
DALL-E 2: KI generiert und editiert Bilder nur anhand von Textbeschreibung 10.April 2022
KI generiert erschreckend exakte Portraits - nur anhand der Stimme 9.April 2022
Neue AJA Ki Pro GO Firmware 4.0 bringt neue Wiedergabe-Optionen 3.April 2022
alle Newsmeldungen zum Thema Machine Learning


[nach oben]

















passende Forenbeiträge zur News:

Archive

2022

Mai - April - März - Februar - Januar

2021
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 16.Mai 2022 - 18:02
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*