Logo Logo
/// News

Capture-Kugel ermöglicht völlig variable, nachträgliche Lichtanpassung von 3D-Körpermodellen

[14:54 Mi,27.November 2019 [e]  von ]    

Möchte man per dreidimensionalem Ganzkörper-Capturing aufgenommene Schauspieler in neue (computergenerierte oder reale) Szenen einfügen, ist die realistische Anpassung der Beleuchtung von Figur und Umgebung eine besonders komplizierte Aufgabe. Normalerweise ist ja die Beleuchtungssituation der Aufnahme (samt Schattenwurf) durch die Textur des 3D-Modells quasi eingebrannt und kann nicht nachträglich, je nach der Lichtsituation in einer neuen Szene, angepasst werden.





Ein Forscher-Teams von Google löst diese Aufgabe durch ein neues ganz spezielles 3D-Capturing System, das aus 331 kugelförmig um den Schauspieler angeordneten LED Leuchten plus 90 12.4 Megapixel (RGB und IR für Tiefeninformationen) Kameras mit 4.112 × 3.008 Pixeln Auflösung besteht, welche mit 60 Frames pro Sekunde Bilder aufnehmen. Aus diesen Bildern plus Reflektions- und Tiefeninformationen wird ein dreidimensionales Modell rekonstruiert samt realen Texturen, Lichtreflektionen und Schatten.

Relightables-Person
Volumetrisches Capturing einer Person



Relightables-Person-relighted
Neuausleuchtung



Die LED Beleuchtung wird in dem System dazu genutzt, um bei zwei definierten Farbstimmungen hochauflösende sogenannte Reflektionsmodelle der Figur zu erstellen. Eine 10s (600 Frames) lange Aufnahme benötigt ca. 650 GB an Daten. Mittels dieser Informationen kann die bewegte Figur dann in Echtzeit fotorealistisch in neue Szenen eingefügt und in jeder Beleuchtungssituation samt Schattenwurf auf dem Körper (und der Kleidung) realistisch dargestellt werden.

Bisher gab es zwar schon einige Verfahren, um z.B. per Deep Learning Gesichter auf Photos oder Bauwerke nachträglich neu realistisch auszuleuchten, aber keine für hochauflösendes volumetrisches Captruting von ganzen Körpern.

Capture-System
Capture System



Technisches Video:



Link mehr Informationen bei augmentedperception.github.io

  
[10 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
patfish    02:06 am 29.11.2019
genau so ist es.
patfish    02:04 am 29.11.2019
... es tut mir leid, aber Lichtanpassungen sehen extrem daneben aus :D ... für so ein Ergebnis brauch ich weder die ganze Technik noch den Aufwand.
canti    17:16 am 28.11.2019
Wie gesagt, Tiefeninformation. Kein "Vorher-Nacher" sondern ähnlich dem menschlichen Sehen: Von dieser Perspektive sieht es so aus, von dieser so, der Unterschied ergibt...weiterlesen
[ Alle Kommentare ganz lesen]

  Vorige News lesen Nächste News lesen 
bildMartin Scorceses „The Irishman“ ab heute auf Netflix. Hier Tutorialclip mit DOP Rodrigo Prieto bildUPDATE 3: Weitere Black Friday, Cyber Monday und andere laufende Rabatte speziell für Filmer


verwandte Newsmeldungen:
3D:

Runway Gen1: Neue Video-KI stilisiert Videos, maskiert Objekte, rendert 3D-Modelle 6.Februar 2023
Asus: Neue 16" OLED Notebooks mit 3D ohne Brille und trotzdem voller 3.2K Auflösung 8.Januar 2023
Nvidia Magic3D - beliebige 3D-Objekte durch Textbeschreibung erzeugen 29.November 2022
PortKeys PT6: Günstiger 5.2" Kameramonitor mit 3D-LUTs, HDMI-Out und 100% DCI-P3 7.November 2022
AvatarCLIP: Neue KI generiert und animiert 3D-Avatare per Textbeschreibung 28.Oktober 2022
Luma AI: Neue Smartphone-App erstellt 3D-Modelle von beliebigen Objekten 21.Oktober 2022
DreamFusion: Neue Google KI generiert beliebige 3D Modelle - nur per Textbeschreibung 11.Oktober 2022
alle Newsmeldungen zum Thema 3D

Capturing:

Move.ai - filmreifes Motion Capture ohne Tracker mit nur zwei iPhones? 10.März 2023
Avatar 2 - freitauchende Stars und Motion Capturing unter Wasser 20.Dezember 2022
AJA stellt Io X3 Thunderbolt 3 Capture- und Playout-Box mit HDMI und 3G-SDI vor 6.Februar 2022
Blackmagic UltraStudio Monitor 3G und Recorder 3G: 3G-SDI- und HDMI Capturing und Playback per Thunderbolt 3 20.Juli 2020
LiveCap: Echtzeit-Motion Capturing per Webcam // Siggraph 2019 15.Juni 2019
AJA Io IP - Capture- und Playout-Box für IP-Workflows 16.November 2017
AJA Io 4K Plus Capturing Box mit Thunderbolt 3 // IBC 2017 15.September 2017
alle Newsmeldungen zum Thema Capturing


[nach oben]

















passende Forenbeiträge zur News:

Archive

2023

März - Februar - Januar

2022
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 23.März 2023 - 19:08
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*