Logo Logo
/// News

Entrauschen, virtuelle Blende und Super Resolution per Algorithmus // Siggraph 2015

[09:45 Di,4.August 2015 [e]  von ]    

In wenigen Tagen beginnt die Messe Siggraph 2015, auf der wieder zukunftsweisende Techniken in Sachen Bildverarbeitung vorgestellt werden. Wir haben uns einige der interessantesten Forschungsarbeiten, die sich mit der Manipulation/Verbesserung von Videos befassen, näher angeschaut und werden diese in den nächsten Tagen präsentieren.

Als erstes ein von Disney Research entwickelter ziemlich universell einsetzbarer Algorithmus, der genausogut dazu verwendet werden kann um Rauschen in Videos zu unterdrücken wie durch LED Beleuchtung verursachtes Bildflimmern, Kompressionsartefakte oder durch Bewegungen verursachte Unschärfe zu entfernen und Super Resolution Bilder zu errechnen. Als Quelle dienen einfache, aus der Hand gefilmte, komprimierte Camcordervideos.



Ein anderes Anwendungsbeispiel ist das Verschwindenlassen von Gegenständen einer Szene wie etwa von Regentropfen oder großen Objekten wie etwa Menschen per 3D-Maske - eine wacklige Kameraaufnahme stört dabei nicht. Eine weitere interessante Anwendung: eine virtuelle Blende mit deren Hilfe bestimmte Bildebenen nachträglich scharf oder unscharf gestellt werden können - was auch einen synthetischen Focus Pull ermöglicht. Und auch Trickshots, in denen Bewegungsschatten einer Person trotz Kamerabewegung an genau der richtigen Position verharren.

ActionShots
Bewegungsschatten


Die Methode basiert auf dem Umstand, daß in Videos trotz der Kamerabewegung viele Bildinformationen aufgrund der schnellen Bildfolge mehrfach vorkommen und nutzt diese Vergleichsbilder zur Analyse des Bildraumes und dem Ermitteln der Bildtiefe der unterschiedlichen Bildobjekte. Anhand dieser Daten können dann ziemlich intelligent verschiedene Bildmanipulationen wie die oben beschriebenen vorgenommen werden - die per Parallelisierung wunderbar auf der Grafikkarte laufen und deswegen auch auf normalen Desktopcomputern zu bewerkstelligen sind.

Wer mehr wissen will, findet hier das Orginal Forschungpaper "Sampling Based Scene-Space Video Processing".

Bereits vorgestellt hatten wir ja schon den von einem Team von Forschern der University of Washington und Google entwickelten Zeitraffer Algorithmus, der aus einer Vielzahl von über einen Zeitraum geschossenen Touristenphotos einer Attraktion automatisch ein Zeitraffervideo erstellt. Der Weg von der Forschungsarbeit zum fertigen Tool hat sich in den letzten Jahren beschleunigt und muss nicht mehr über die Hersteller von Videobearbeitungsprogrammen (wie etwa Adobe) führen - Microsofts Super-Zeitraffer-Tool Hyperlapse ist zum Beispiel schon jetzt als kostenloses App verfügbar.

Hier zur Einstimmung auf die nächsten Siggraph Neuigkeiten das Demoreel der Siggraph 2015:

.


  
[1 Leserkommentar] [Kommentar schreiben]   Letzter Kommentar:
Poxxxx    14:06 am 5.8.2015
Warum sind wir nicht längst an dem Punkt an dem jeder Kamerasensor von Hausaus mit einer Depth-Map Sensorik ausgestattet wird und die TiefenMap in einem eigenem Kanal abspeichert...weiterlesen
[Kommentar ganz lesen]

  Vorige News lesen Nächste News lesen 
bildSKY testet UltraHD HDR Live Übertragung beim DFL-Supercup bildNeue AF-S NIKKOR 24-70mm f/2.8 Zoom-Optik jetzt mit VR


verwandte Newsmeldungen:
Compositing:

Blackmagic DaVinci Resolve 18.6 Update bringt zahlreiche Neuerungen 15.September 2023
Premiere Pro, After Effects und Frame.io - Mehr KI, 3D-Workspace und AWS-Cloud 13.September 2023
Boris FX kauft 3D-Tracking-Software SynthEyes 23.August 2023
Blackmagic DaVinci Resolve 18.5.1 - kleineres Bugfix-Update 15.August 2023
DaVinci Resolve 18.5 Referenz-Handbuch (über 4.000 Seiten) zum freien Download verfügbar 27.Juli 2023
Blackmagic DaVinci Resolve 18.5 - finale Version jetzt verfügbar 21.Juli 2023
Plugins für DaVinci Resolve programmieren mit dem Fusion Fuse SDK 18.Juli 2023
alle Newsmeldungen zum Thema Compositing

Grundlagen:

Google Pixel 8 (Pro) - Neue Stufe der "computational" Videografie durch KI? 25.September 2023
ARRI Alexa 35 Update SUP 1.1 bringt zahlreiche Workflow-Verbesserungen und ARRIRAW 3.8K 16:9 11.Mai 2023
Nie wieder unscharfe Videos? Super Resolution im Browser per kostenloser KI 6.März 2023
Canon entwickelt 4K-Bildsensor mit 148 dB Dynamik (24 Blendenstufen) - aber nicht für Filmer 26.Januar 2023
Asus: Neue 16" OLED Notebooks mit 3D ohne Brille und trotzdem voller 3.2K Auflösung 8.Januar 2023
Google Pixel 7 (Pro) - Meilenstein in der Computational Photography? 10.Oktober 2022
Lenovo ThinkVision M14d: Mobiler USB-C 14" Monitor mit 2.2K Auflösung angekündigt 8.März 2022
alle Newsmeldungen zum Thema Grundlagen


[nach oben]

















passende Forenbeiträge zur News:

Archive

2023

Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2022
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 3.Oktober 2023 - 13:27
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*