Funless
Beiträge: 2386

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von Funless » Sa 22 Sep, 2018 19:10

Jetzt beruhigen wir uns alle wieder und gucken ein bisschen YT Influenzer Video ...

MfG
Funless

"LOW LIGHT DOESN'T MEAN NO LIGHT, Get you gear out! PRACTICE WILL make you better, debates on forums will not!"




R S K
Beiträge: 785

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von R S K » Sa 22 Sep, 2018 19:44

Wenn schon, dann influenza.

- RK
FCP X User? Hier gibt es ein umfassendes Training auf Deutsch!
Youtube / Facebook




Funless
Beiträge: 2386

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von Funless » Sa 22 Sep, 2018 19:48

R S K hat geschrieben:
Sa 22 Sep, 2018 19:44
Wenn schon, dann influenza.

- RK
Ist aber kein Grippe Video.
MfG
Funless

"LOW LIGHT DOESN'T MEAN NO LIGHT, Get you gear out! PRACTICE WILL make you better, debates on forums will not!"




R S K
Beiträge: 785

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von R S K » Sa 22 Sep, 2018 19:50

Funless hat geschrieben:
Sa 22 Sep, 2018 19:48
Ist aber kein Grippe Video.
Na dann… influencer.

😏

- RK
FCP X User? Hier gibt es ein umfassendes Training auf Deutsch!
Youtube / Facebook




cantsin
Beiträge: 4939

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von cantsin » So 23 Sep, 2018 18:30

Hier hat mal jemand mit Programmierkenntnissen ein reverse engineering von BRAW anhand des SDK vorgenommen:
What there is:

8x8 DCT (same as in jpeg-ext, prores, prores-raw and other codecs) - but in 12 bit precision
(with specific funny constants from one academic paper telling you how to do it super-fast)

The iDCT has separate shaders for full,half,quarter and eight of the resolution

The DCT compressed data is in a pseudo-YCbCr colour-space, so encoding a weighted RGB average, and differences towards R and B

Transfer curve that is partially linear and partially quadratic, with a threshold
Linearization LUT, with 32K points

There is a yet unknown feature that selects one of the 4 tables how to mix colors up (or that might be the quantization)

Decoding quality is either fast/rough or high-quality
Decoding to 4 buffer formats (RGBA, 32bit, 32bit planar, 16bit planar)
Decoding to 2 not yet understood formats with 1 and 4 elements (maybe yuv/rgb or rgb/raw)

Simple and straightforward processing (blacklevel, gain, linearization, demosaic, saturation, colorspace conversion)


What there is not:

Wavelets (dirac-pro, TICO/jpeg-xs)

Encoding (at least no API exists for inserting raw data and creating files)

No advanced de-mosaicing that would trace contours or do other funny stuff



Looking into a sample 4K6 file:

it is based on ISO MEDIA format (Quicktime MOV), had no trouble to parse it through by my MP4 library

it is clearly an i-frame file and it might be a constant bit-rate one I got, since the frame sizes were almost same

there is some acquisition metadata about lens, shutter, iso per frame, these take few 64byte chunks of each frame, in custom QT atom format (256 on my sample)

then goes the binary header, with information about the resolution and slicing the file

and the slice index and those unknown mixing flags per slice


The 4k6 file seems to be partitioned into 240 slices, that are in 8x30 matrix. 8 wide shall correspond to the camera capabilities seen earlier with the JPEG extended profile in the 3:1 and 4:1 codecs, yet there the slices spanned over the whole (or half) the height of the picture. Here they span just 88 pixels tall. More slices means more potential to get things decoded in parallel (either on cpu or gpu).

I have not found yet a way to decode the slice bitstream, to tell whether it is just a JPEG, or it has subsections that lead to even faster /progressive/ decoding when processed partially.


My opinion on some choices:

Use of ISO MEDIA is fine and getting a new extension is good to avoid people telling "hey, i cant open this MP4"
(which was and is a trouble with the nonstandard coding in the 3:1/4:1 formats)

Including the shady shader source code - this makes the library future-hardware proof. When you get a new GPU architecture, it will run optimally.
e.g. Canon in their SDK pre-compiled these functions for the current gpu architectures, which means it might not even run on something newer, or will run sub-optimally.

Instead of obfuscation, they just might use a compression/encryption and I would probably never find these shaders. Not on first sight.

The partial de-mosaic may just mean:
- take this RGGB raw data, create R, (Gr+Gb)/2, B, convert it to pseudoYUV444, encode with JPEG(444). And the little of Gb-Gr residue is encoded extra
- for fast decoding at 1/2 of resolution just decompress the JPEG and convert to final color space, no de-mosaic, look ma - what a speed!
- for high quality decoding, get the Gr/Gb difference back, compose the original RGGB bayer data and do a full resolution de-mosaic
https://cml.news/g/cml-raw-log-hdr/topi ... s/25749037

Der letzte Punkt klingt nach einem cleveren Hack...




mash_gh4
Beiträge: 2703

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von mash_gh4 » Mo 24 Sep, 2018 11:14

diese ersten erkenntnise über die tatsächliche sind natürlich wirklich sehr interessant.
auf so einer basis kann man wesentlich vernünftiger über die tatsächlichen vorzüge und grenzen des formats diskutieren.
schade, dass es nicht von haus aus in einer solchen weise dokumentiert wurde. gibt ja offenbar wirklich nichts aufregendes daran, dass nicht auch in vielen anderen formaten und anwendungen ständig sehr ähnlich abgewickelt wird.




Frank Glencairn
Beiträge: 8006

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von Frank Glencairn » Mo 24 Sep, 2018 11:53

Die tatsächlichen Vorzüge und Grenzen des Formats erkundet man am besten, indem man es ausprobiert.




mash_gh4
Beiträge: 2703

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von mash_gh4 » Mo 24 Sep, 2018 11:58

Frank Glencairn hat geschrieben:
Mo 24 Sep, 2018 11:53
Die tatsächlichen Vorzüge und Grenzen des Formats erkundet man am besten, indem man es ausprobiert.
da hast recht -- nur nennt sich das halt in jenen kreisen, die an entsprechenden technischen einsichten und fakten interessiert sind, gleich einmal: reverse engineering. ;)

das kann bei völlig ungenügender dokumentation durch den hersteller oft tatsächlich weit mehr bringen, als alles zu glauben, was einem diverse werbefritzen und technisch weniger bewanderte fanboys einzureden versuchen.




Frank Glencairn
Beiträge: 8006

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von Frank Glencairn » Mo 24 Sep, 2018 12:07

Ich glaub nur, was ich in meinem Material sehe :-)




mash_gh4
Beiträge: 2703

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von mash_gh4 » Mo 24 Sep, 2018 12:22

Frank Glencairn hat geschrieben:
Mo 24 Sep, 2018 12:07
Ich glaub nur, was ich in meinem Material sehe :-)
naja -- mein alter hoch geschätzter logik-professor hat seinen studenten den sinn entsprechender bemühunge immer mit dem sehr einfachen beispielsatz: "wenn es regnet, ist die straße nass" zu veranschaulichen versucht, der ja bekanntlich leider auch den umkehrschluss nicht zulässt, dass es geregnet haben muss, wenn uns die straße nass erscheint...

aber natürlich macht's sinn, dass man einfach auch seinen augen traut bzw. die dinge auf ihre praktische tauglichkeit hin überprüft, nur erübigt sich dadurch noch lange nicht die sinnhaftigkeit, technische lösungen auch aus anderen blickwinkeln zu betrachten, sie zu verstehen/hinterfragen und auch in dieser hinsicht mit anderen lösungen zu vergleichen.
Zuletzt geändert von mash_gh4 am Mo 24 Sep, 2018 12:35, insgesamt 1-mal geändert.




Jott
Beiträge: 14718

Re: Blackmagic RAW vorgestellt -- das beste aus zwei Welten? // IBC 2018

Beitrag von Jott » Mo 24 Sep, 2018 12:24

Frank Glencairn hat geschrieben:
Mo 24 Sep, 2018 11:53
Die tatsächlichen Vorzüge und Grenzen des Formats erkundet man am besten, indem man es ausprobiert.
Das ist dann aber ein "Küchentischtest" (© wowu)! :-)




Social Media

       
 Aktuelle Beiträge [alle Foren]
 
» unbekanntes Symbol auf canon dv3i mc
von Allmus - Sa 23:34
» LG gram: ultraleichtes 17" Notebook mit Thunderbolt 3
von Xergon - Sa 23:34
» canon dv3i mc Cassette fährt nicht heraus
von Allmus - Sa 23:14
» Erste Aufnahmen von der Blackmagic Pocket Cinema Camera 4K
von klusterdegenerierung - Sa 23:03
» Atomos Ninja V im ersten Praxistest im Interview Setup mit Panasonic GH5S // IBC 2018
von DV_Chris - Sa 22:57
» Wie mach ich das mit footage?
von klusterdegenerierung - Sa 22:14
» DaVinci Resolve 15.2.2 Update - ausschließlich Fixes...
von klusterdegenerierung - Sa 22:10
» Atomos Ninja V, Seriendefekt am 3,5 mm Input?
von Skeptiker - Sa 21:08
» Biete Metabones Speedbooster Ultra 0,71 EF-E
von christophmichaelis - Sa 20:51
» DJI Osmo Pocket: Mini-Einhand-Gimbal mit integrierter Kamera
von cantsin - Sa 20:15
» Vegas 15 Pro Edit für 22 €
von Frank B. - Sa 20:00
» Mini DV Kameras nach Afrika bzw. Ostländer verkaufen
von Frank B. - Sa 19:50
» Laufschrift (Abspann) mit Pinnacle Studio 21/22?
von matze29 - Sa 17:41
» Polaroid mal anders.....
von ruessel - Sa 17:05
» Venedig: Marinemuseum
von dosaris - Sa 16:48
» Zubehör Panasonic AG-DVC30 u.a. zu verkaufen
von cidercyber - Sa 15:45
» Blackmagic veröffentlicht 2-stündigen Trainingsfilm "DaVinci Resolve 15: The Art of Color Grading"
von Huitzilopochtli - Sa 15:32
» Auch IMAX erklärt VR-Testlauf für gescheitert
von Frank Glencairn - Sa 14:56
» "Schlechte", stark komprimierte Bilddateien / Scans besser machen, Qualität erhöhen?
von Fassbrause - Sa 14:29
» Apple: Kein Unterstützung mehr von Cineform und DNxHD Codecs in zukünftigem macOS
von motiongroup - Sa 12:19
» Suche Sony XDCA - FS7
von christophmichaelis - Sa 11:53
» SLR Magic MicroPrime - hat jemand Erfahrungen mit dem Objektiv?
von Frank Glencairn - Sa 11:45
» Captive State - offizieller Trailer
von Funless - Sa 11:07
» Audiobearbeitung
von andreas97 - Sa 9:56
» Meyer Optik Görlitz wird weitergeführt
von MK - Sa 8:02
» Neues Spitzenmodell Nvidia Titan RTX: 24 GB für 2.700 Euro und 8K Editing in Echtzeit
von Frank Glencairn - Sa 7:57
» Neue L-Mount Alliance: Leica + Panasonic + Sigma kooperieren // Photokina 2018
von Darth Schneider - Sa 7:39
» Film aus Avid Media Composer auf DVD brennen
von Madhavi - Sa 6:26
» Adrianas Pakt
von handiro - Fr 21:17
» Canon EOS R im 4K Video Test: 10 Bit LOG, Dual Pixel AF, Hauttöne. Bedienung, inkl. Nikon Z6 Vergleich
von Jan - Fr 19:34
» Hilfe, was lief schief?! Panasonic FZ2000 4K Video
von Jan - Fr 19:27
» Kipon: Mittelformat auf Vollformat Speedbooster und manuelle Objektive für Nikon Z und Canon RF
von Jörg - Fr 18:34
» Tonspur Synchronisation ext. Recorder
von mikroguenni - Fr 17:28
» Biete 7" TFT LCD HD Kamera-Monitor Jag35 / Lilliput
von camerastilo - Fr 17:26
» Biete Kamera Sleeve / Kamera-Schutz für Sony PDW700 und ähniche Schulter-Camcorder
von camerastilo - Fr 17:22
 
neuester Artikel
 
Kommentierte Gerüchte zu Panasonics S1(R) und weiterer L-Mount Kamera

Es gibt schon eine Menge Gerüchte zu Panasonics S1R und einer weiteren L-Mount Cinekamera. Diese wollen wir einmal kurz kommentieren... weiterlesen>>

Monster-Flunder - MSI P65 Creator 8RF-451 Notebook im 4K-Schnitt-Performance Test

Wir konnten uns ein besonders potentes Windows Notebook in der Redaktion näher ansehen, das sich zur 4K-Videobearbeitung eignet und trotz seiner Leistungsdaten ziemlich flach und leicht bleibt: Das MSI P65 Creator 8RF-451. weiterlesen>>

neuestes Video
 

Aktuelles Video:
Flasher - Material (Official Video)

Fängt ein bißchen lahm an das Musikvideo, aber schaltet nach einigen Sekunden in eine Art Turbomodus, bevor es völlig durchdreht und sich auf der YouTube-Metaebene austobt.