' Neuronales Netz DAIN interpoliert Stop-Motion Frames
Logo Logo
/// News

Neuronales Netz DAIN interpoliert Stop-Motion Frames

[14:47 Mi,9.September 2020 [e]  von ]    

Auch das war zu erwarten. Nachdem sich mittlerweile Neuronale Netze in vielen Bereichen durch das natürliche Ergänzen fehlender Informationen hervortun lag ein Versuch mit Stop-Motion Material ja quasi auf der Hand.

Und so hat der Stop Motion Animator (und KI-Scientist) LegoEddy einmal ein spezielles KI-Modell zur Frameinterpolation (DAIN) auf seine (mit 15 fps) selbst animierten Lego-Stop-Motion Clips angewendet.

DAIN darf dabei aktuell zur State-of-The-Art Frame-Interpolation gezählt werden, weil es sowohl Objekt-Überdeckungen als auch Tiefeninformationen ohne zusätzliche Anwender Interaktion gut erkennt.



KIStopmotion



Das Ergebnis überrascht dann sogar in zweierlei Hinsicht. Einerseits, weil die erzielte Qualität der Interpolation wirklich auf extrem hohem Niveau gelingt und nur sehr vereinzelt schlecht aufgelöste Artefakte zu sehen sind. Und auf der anderen Seite, weil man eine Stop-Motion Motion Animation mit 60 fps einfach nicht gewohnt ist und dies einen komplett neuen Seheindruck erzeugt. Ob dieser neue Eindruck dann letztlich auch besser ist, liegt buchstäblich im Auge des Betrachters. Aber es zeigt ein weiteres mal, wie KI-Modelle in Zukunft die Prozesse beim Film komplett umkrempeln werden.

In seinem Video beschreibt LegoEddy noch ein paar HIntergründe zu DAIN - unter anderem auch wie man es komplett kostenlos für eigenen Projekte nutzen kann. Und im Video findet sich ein Link auf (s)einen kompletten Lego-Film, der von 15fps auf 60 Bilder pro Sekunde hochgerechnet wurde.



Viel Vergnügen beim Staunen...

Link mehr Informationen bei www.youtube.com

  
[13 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
meer    08:48 am 12.9.2020
Wir 3dler können das schon lange 😎
srone    22:05 am 11.9.2020
zum schluss drehen wir in sd, dain und tecogan werdens schon richten...;-) wie recht hatte wowu, als er all dies prophezeit hatte, die wahre abbildung der realität interessiert...weiterlesen
meer    21:26 am 11.9.2020
Auch für 3d Artisten sehr wertvoll, gerade bei renderzeiten von 10+ Min. pro frame,dass teste ich gerade mal 🤪🙃
[ Alle Kommentare ganz lesen]

  Vorige News lesen Nächste News lesen 
bildGerüchte um GoPro Hero 9 Black: Farbiges Frontdisplay und 20 Megapixel Sensor bildSmooth-XS: Neuer Smartphone Gimbal von Zhiyun fungiert auch als intelligenter Selfie Stick


verwandte Newsmeldungen:
Grundlagen:

ARRI Alexa 35 Update SUP 1.1 bringt zahlreiche Workflow-Verbesserungen und ARRIRAW 3.8K 16:9 11.Mai 2023
Nie wieder unscharfe Videos? Super Resolution im Browser per kostenloser KI 6.März 2023
Canon entwickelt 4K-Bildsensor mit 148 dB Dynamik (24 Blendenstufen) - aber nicht für Filmer 26.Januar 2023
Asus: Neue 16" OLED Notebooks mit 3D ohne Brille und trotzdem voller 3.2K Auflösung 8.Januar 2023
Google Pixel 7 (Pro) - Meilenstein in der Computational Photography? 10.Oktober 2022
Lenovo ThinkVision M14d: Mobiler USB-C 14" Monitor mit 2.2K Auflösung angekündigt 8.März 2022
Zoom F3 - professioneller Mini Field Recorder mit XLR und 32-Bit-Float 19.Januar 2022
alle Newsmeldungen zum Thema Grundlagen

KI:

KI-Videogenerator der zweiten Generation - Runway Gen-2 Zugang jetzt offen 8.Juni 2023
Packaging-Kapazitäten ausgebucht - Befeuert KI die nächste GPU-Verknappung? 7.Juni 2023
Die Paragraphica KI-Kamera ist da: Bilder ohne Objektiv von der Umgebung durch KI aufnehmen? 5.Juni 2023
Generative KI: Googles StyleDrop lernt und imitiert Stil nach einem einzigen Bild 5.Juni 2023
AMDs neue Adrenalin Treiber 23.5.1 verdoppeln Rechenleistung in Stable Diffusion 3.Juni 2023
KI-Drohne des US Militärs tötet Operator, um effektiver töten zu können - in Simulation 2.Juni 2023
Japan und Israel mit liberalen Copyright Positionen beim KI-Training 2.Juni 2023
alle Newsmeldungen zum Thema KI


[nach oben]

















passende Forenbeiträge zur News:

Archive

2023

Juni - Mai - April - März - Februar - Januar

2022
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 9.Juni 2023 - 18:02
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*