Logo
/// News

Capture-Kugel ermöglicht völlig variable, nachträgliche Lichtanpassung von 3D-Körpermodellen

[14:54 Mi,27.November 2019 [e]  von ]    

Möchte man per dreidimensionalem Ganzkörper-Capturing aufgenommene Schauspieler in neue (computergenerierte oder reale) Szenen einfügen, ist die realistische Anpassung der Beleuchtung von Figur und Umgebung eine besonders komplizierte Aufgabe. Normalerweise ist ja die Beleuchtungssituation der Aufnahme (samt Schattenwurf) durch die Textur des 3D-Modells quasi eingebrannt und kann nicht nachträglich, je nach der Lichtsituation in einer neuen Szene, angepasst werden.





Ein Forscher-Teams von Google löst diese Aufgabe durch ein neues ganz spezielles 3D-Capturing System, das aus 331 kugelförmig um den Schauspieler angeordneten LED Leuchten plus 90 12.4 Megapixel (RGB und IR für Tiefeninformationen) Kameras mit 4.112 × 3.008 Pixeln Auflösung besteht, welche mit 60 Frames pro Sekunde Bilder aufnehmen. Aus diesen Bildern plus Reflektions- und Tiefeninformationen wird ein dreidimensionales Modell rekonstruiert samt realen Texturen, Lichtreflektionen und Schatten.

Relightables-Person
Volumetrisches

CapturingCapturing im Glossar erklärt einer Person

Relightables-Person-relighted
Neuausleuchtung



Die LED Beleuchtung wird in dem System dazu genutzt, um bei zwei definierten Farbstimmungen hochauflösende sogenannte Reflektionsmodelle der Figur zu erstellen. Eine 10s (600 Frames) lange Aufnahme benötigt ca. 650 GB an Daten. Mittels dieser Informationen kann die bewegte Figur dann in Echtzeit fotorealistisch in neue Szenen eingefügt und in jeder Beleuchtungssituation samt Schattenwurf auf dem Körper (und der Kleidung) realistisch dargestellt werden.

Bisher gab es zwar schon einige Verfahren, um z.B. per Deep Learning Gesichter auf Photos oder Bauwerke nachträglich neu realistisch auszuleuchten, aber keine für hochauflösendes volumetrisches Captruting von ganzen Körpern.

Capture-System
Capture System



Technisches Video:



Link mehr Informationen bei augmentedperception.github.io

  
[10 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
patfish    02:06 am 29.11.2019
genau so ist es.
patfish    02:04 am 29.11.2019
... es tut mir leid, aber Lichtanpassungen sehen extrem daneben aus :D ... für so ein Ergebnis brauch ich weder die ganze Technik noch den Aufwand.
canti    17:16 am 28.11.2019
Wie gesagt, Tiefeninformation. Kein "Vorher-Nacher" sondern ähnlich dem menschlichen Sehen: Von dieser Perspektive sieht es so aus, von dieser so, der Unterschied ergibt...weiterlesen
[ Alle Kommentare ganz lesen]

  Vorige News lesen Nächste News lesen 
bildMartin Scorceses „The Irishman“ ab heute auf Netflix. Hier Tutorialclip mit DOP Rodrigo Prieto bildUPDATE 3: Weitere Black Friday, Cyber Monday und andere laufende Rabatte speziell für Filmer


verwandte Newsmeldungen:
3D:

3D-Ken Burns Effekte mit PyTorch selber ausprobieren 19.November 2019
RED halbiert den Preis des Hydrogen One 3D-Smartphones 20.Oktober 2019
KI rendert 3D-Ken Burns Effekte aus einem Einzelbild 22.September 2019
Nikon 10 Bit N-Log 3D LUT für Nikon Z6 u. Z7 zum freien Download da - ProRes RAW kostenpflichtig 27.August 2019
HitFilm Pro 13.0 erschienen -- jetzt mit 3D Kamera-Tracker von Foundry 2.August 2019
Virtuelle 3D Ansichten aus wenigen Photos berechnen // Siggraph 2019 2.Juli 2019
Edelkrone Ortak: günstigeres Zubehör aus dem eigenen 3D-Drucker 11.Juni 2019
alle Newsmeldungen zum Thema 3D

Capturing:

LiveCap: Echtzeit-Motion Capturing per Webcam // Siggraph 2019 15.Juni 2019
AJA Io IP - Capture- und Playout-Box für IP-Workflows 16.November 2017
AJA Io 4K Plus Capturing Box mit Thunderbolt 3 // IBC 2017 15.September 2017
Rokoko Smartsuit Pro -- Low Budget Motion Capture per Gyro-Sensoren 13.Mai 2017
IKinema Orion -- Low Budget Motion Capture via HTC Vive Tracker 27.März 2017
Disney: Echtzeit Motion Capturing mit weniger Sensoren 14.Dezember 2016
Epiphan AV.io 4K: Live Capturing von 4K HDMI Video per USB 3.0 18.Juli 2016
alle Newsmeldungen zum Thema Capturing


[nach oben]

















passende Forenbeiträge zum Thema
3D:
On-Camera Monitor mit 3D-Lut: SWIT CM-55C - Ein erster Eindruck
3D wichtig für Kino-Erfolg
RED teasert Lithium Kamera für die 3D/H4V-Aufnahme
Huawei HONOR View20 Smartphone kommt mit 48MP Fotoauflösung sowie ToF 3D-Kamera
Auch IMAX erklärt VR-Testlauf für gescheitert
3D total: Popouts des Jahres
Suche Jemanden, der mir in AE mit Element 3d ein Video rendert
mehr Beiträge zum Thema 3D


Archive

2019

Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2018
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000




































Specialsschraeg
21. Dezember / Diverse
Kurzfilmtag 2019
26. Januar 2020/ Hanau
JUNG & ABGEDREHT – 8. Hanauer Jugend-Kurzfilmfestival
20. Februar - 1. März 2020/ Berlin
Berlinale
22-27. Februar 2020/
Berlinale Talents
alle Termine und Einreichfristen


update am 14.Dezember 2019 - 12:02
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*