Sony patentiert Dual-ISO für Bayer Sensel Anordnung

[chmee]

@WoWu
Es gibt relativ fixe Rauschbeträge (zB zwischen Sensor und Verstärker) und es gibt variable (zB Sensorrauschen), die Kennlinie steigt nicht linear an, sonst würden wir ja mit jedem ISO eben eine Blende verlieren. Tun wir aber nicht. Genau deswegen ist das Anheben in einen anderen, größeren Wertebereich für die Daten hilfreich. Quantisierungsfehler spielen dann doch auch eine Rolle.

..steigt auch der Dynamikumfang...

Diese Aussage ist nur auf den unteren Bereich zu werten. Eben diese 4LW, der zuvor noch (8Bit-Beispiel oben) in 16 Werten dargestellt werden mussten.

Aber wem erzähl ich das..

[WoWu]

Es gibt in einem Kamerasystem 7 relevante Rauscharten aus Sensor, Verstärkung, Wandlung usw., die zu unterschiedlichen Arbeitspunkten sich unterschiedlich bemerkbar machen.
Bist Du unter einem "sweet spot" sind es eher die Sensoranteile, die das Signal negativ beeinträchtigen, darüber eher die verstärkungsbedingten Anteile.
Die Definition der Dynamic ist aber immer SNR=>FW.
Dazwischen kannst Du nun Dein Mapping so wählen, dass die Übertragungskurve so flach wird, dass Du theoretisch beliebig viele Blenden übertragen kannst. Nur dass die Blendeninhalte dann letztlich nur noch mit einem Wert auflösen, was sicher nicht der Sinn einer Übertragung ist.
Also sind die Dynamikangaben über den Wert :"Blende" völliger Blödsinn und nur dann von Relevanz, wenn innerhalb jeder Blende ein Mindestmaß an Übertragungsweren auch eingehalten wird.
Daher kann man mit reinen Blendenaussagen auch eigentlich nichts aussagen.
Und was das Noiseverhalten angeht, so ändert ein anderes Mapping absolut nichts daran.

[iasi]

Sony möchte nebeneinanderliegende Sensel unterschiedlich lang belichten.
Dadurch könnten die Nachteile von kurzen und langen Belichtungszeiten softwaremäßig aufgehoben werden - die hierfür notwendige Rechenpower dürfte mittlerweile vorhanden sein.

Sony will wohl gar nicht mit unterschiedlicher Signalverstärkung arbeiten, sondern eben mit verschiedenen Belichtungszeiten, also Lichtmengen.
Letztlich ist das eine Erweiterung des Bayer-Prinzips - mehr Daten zum Interpretieren - ist doch schön.
Wo bisher das full-well erreicht war, gibt es nun durch Sensel, die kürzer belichtet wurden, einen weiteren, abgestuften Wert - diesen kann man dann schön in die Interpretation des Bildpunktes mit einbeziehen.

[Ab-gedreht]

Sony möchte nebeneinanderliegende Sensel unterschiedlich lang belichten.
Dadurch könnten die Nachteile von kurzen und langen Belichtungszeiten softwaremäßig aufgehoben werden - die hierfür notwendige Rechenpower dürfte mittlerweile vorhanden sein.

Sony will wohl gar nicht mit unterschiedlicher Signalverstärkung arbeiten, sondern eben mit verschiedenen Belichtungszeiten, also Lichtmengen.
Letztlich ist das eine Erweiterung des Bayer-Prinzips - mehr Daten zum Interpretieren - ist doch schön.
Wo bisher das full-well erreicht war, gibt es nun durch Sensel, die kürzer belichtet wurden, einen weiteren, abgestuften Wert - diesen kann man dann schön in die Interpretation des Bildpunktes mit einbeziehen.

das würde Sinn ergeben.

Mal ne andere Praxis für mehr DR:

Hat mal jemand ein 3D-spiegel-rig verwendet um mehr DR zu bekommen?
Man könnte ja beide Kameras genau übereinander fahren eine unter, und eine überbelichten?

[Bergspetzl]

Der Kollege hat scheinbar die arbeitsweise von Sensoren noch nicht ganz geschnallt.

Es handelt sich um präparierte Halbleiter Silizium Flächen. Wenn du es ganz vereinfachen willst dann stelle dir den aufbau einer Solarzelle vor. Weist du was ind er Photovoltaik passiert?

Ähnlich ist es auch in der Fotozelle, es wird ein ähnliches Grundprinzip verwendet. Solange ist alles Analoge Elektronik im Mikrobereich und WoWu sagte es schon, da greifen wir nur ein, indem wir einen ND davorhalten (bzw abblenden). Mehr möglichkeiten haben wir nicht, um den Lichtfluss zu bestimmen (es sei denn wir bestimmen das Licht).

Dann kommt es auf den Sensor an, und Wowu's oft erwähntes Fullwell. Es gibt also Pro Lichtkanal auf dem Sensor einen Wert (Menge der Lichtphotonen - Spannung) die in diesem Schacht gelandet sind. Diese Spannung wird an einem Punkt der Signalkette in einen Wert übersetzt. Diese Spannung ist aber absolut, stellt die physikalische Realität zu diesem Augenblick an dieser Stelle da und ist die Grundlage jeder weiterer Verarbeitung des Signales. Der Wert wird dann im AD Wandler ins digitale übersetzt. An irgendeinem Punkt setzt jetzt die Verstärkung des Signales ein. Wann und wo und wie das ist wird von jedem Hersteller unterschiedlich gehandhabt. Aber mehr Info als der Chip aufgenommen hat, kannst du erstmal nicht bekommen (angenommen, der Hersteller würde dir Zugang zu diesen Daten geben, was er sowieso nie macht). Iso(Gain) verstärkt jetzt diesen Wert ggf. und gibt ihn ins Prozessing weiter. Aber an irgendeiner Stelle wird er eben "eingestanzt". Und je höher diese Verstärkung, desto mehr Störung gibt es. Hier lässt sich Qualität (wie so oft im Analogen) in SNR messen. Das sollte dir als Grundlage geläufig sein.


Jetzt überlege dann weiter in Richtung "Dual Iso", was ja an sich nur eine Spieform des Ganzen ist. Es ist wie HDR in einem Bild zu belichten. Einmal hell, einmal niedrig, und dann wird es gemerged oder gestiched, wie auch immer dann der Begriff ist. Die Vor und Nachteile ergeben sich dann aus der Überlegung alleine.

[Bergspetzl]

bei 3D Rigs hast du immer eine parallaxe.

[Ab-gedreht]

Das ist mir schon alles klar, aber vielen Dank für die Erklärung!

Jetzt überlege dann weiter in Richtung "Dual Iso", was ja an sich nur eine Spieform des Ganzen ist. Es ist wie HDR in einem Bild zu belichten. Einmal hell, einmal niedrig, und dann wird es gemerged oder gestiched, wie auch immer dann der Begriff ist. Die Vor und Nachteile ergeben sich dann aus der Überlegung alleine.

Hier vermischst du Dual ISO und Belichten.
Wie du schreibst ist es nur möglich über den Lichteinfall zu regulieren.
Wenn du die Zeilen unterschiedlich belichten würdest würde es auch funktionieren... Aber dual Iso hat doch nichts mit der Belichtung zu tuen!

[Bergspetzl]

...deswegen schreibe ich "ist wie" HDR und schreibe nicht "es ist" HDR. Beide versuchen mehr Dynamik zu generieren. Der eine auf Kosten der Zeit (HDR, nacheinander), der Andere eher auf Kosten der Auflösung/Schärfe (im selben Bild).

[WoWu]

diesen kann man dann schön in die Interpretation des Bildpunktes mit einbeziehen.

Genau am springenden Punkt versagt die Erklärung wieder, ebenso wie in dem Artikel das "clever".
Denn wenn du spatial versetzte Pixel irgendwie mit einander kombinierst, sei es, dass man helle und dunkle Pixel mischt, um solche Werte, die überbelichtet sind, etwas dunkler zu machen oder jene Pixel, die zu dunkel sind, etwas heller, verlierst Du die Auflösung, also die räumliche Trennung der Pixels.
Wenn wenn auf einem dieser Pixel z.B. ein feiner Punkt (Bilddetail) zu sehen ist und auf dem andern Pixel nicht, dann findet sich dieser Punkt plötzlich auf beiden Pixels, wenn auch schwach, wieder.
Du hast also nur noch 50% die spatiieren Information.
Da war es schon "cleverer", ganze Bilder von unterschiedlichen Belichtungen (wie bei HDR) miteinander zu mischen.
Da hatte man dann wenigstens "nur" das Problem mit den bewegten Inhalten. Die kämen hier noch hinzu.

Es wäre also einmal angesagt, "clever" oder "schön" einwenig genauer zu definieren.
Ich glaube die Methode, wie SONY das machen will, hat jeder verstanden.

[Ab-gedreht]

bei 3D Rigs hast du immer eine parallaxe.

Ich meine es gibt auch Rigs bei denen du soweit verschieben kannst, das du deckungsgleich bist.
Oder eben ein Ring mit Spiegel, so das beide Kameras das gleiche Bild aufzeichnen...

[iasi]

diesen kann man dann schön in die Interpretation des Bildpunktes mit einbeziehen.

Genau am springenden Punkt versagt die Erklärung wieder, ebenso wie in dem Artikel das "clever".
Denn wenn du spatial versetzte Pixel irgendwie mit einander kombinierst, sei es, dass man helle und dunkle Pixel mischt, um solche Werte, die überbelichtet sind, etwas dunkler zu machen oder jene Pixel, die zu dunkel sind, etwas heller, verlierst Du die Auflösung, also die räumliche Trennung der Pixels.
Wenn wenn auf einem dieser Pixel z.B. ein feiner Punkt (Bilddetail) zu sehen ist und auf dem andern Pixel nicht, dann findet sich dieser Punkt plötzlich auf beiden Pixels, wenn auch schwach, wieder.
Du hast also nur noch 50% die spatiieren Information.
Da war es schon "cleverer", ganze Bilder von unterschiedlichen Belichtungen (wie bei HDR) miteinander zu mischen.
Da hatte man dann wenigstens "nur" das Problem mit den bewegten Inhalten. Die kämen hier noch hinzu.

Es wäre also einmal angesagt, "clever" oder "schön" einwenig genauer zu definieren.
Ich glaube die Methode, wie SONY das machen will, hat jeder verstanden.

Aber du sagst doch immer, dass die Objektive gar nicht mehr genug auflösen, um die aktuellen hohen Sensorauflösungen überhaupt ausreizen zu können. Und bei einem Bayer-Sensor hast du sowieso immer Sensorenhaufen, aus denen dann die Bildpunkte zusammengerechnet werden - wenn Sony nun einige zusätzliche rein packt, die dann unterschiedlich belichtet werden, geht zwar Auflösung verloren, aber man minimiert die Nachteile von z.B. HDRx.
Es müssen zudem auch nicht nur extreme DR angepeilt werden - man könnte auch einen weicheren Übergang in den Lichtern erreichen - schließlich können die zusätzliche Sensordaten beim Debayering mitgenutzt werden - man kann doch noch früher ansetzen, als bei HDR.
Die erforderliche Rechenpower für komplexere Algorithmen ist ja schließlich mittlerweile vorhanden.

[Bergspetzl]

vielleicht lässt man das alte ccd wieder auferleben. mit 9 fach prisma. instant hdr für jeden farbkanal :)

[WoWu]

@Iasi
Hier geht es um ein Prinzip der Abtretung. Darin ist noch nichts von der grösee der Sensorpixel erwähnt was bisher noch gar nichts über die erforderliche Auflösungsanforderung an das Objektiv besagt.

Du suchst nach Argumenten, wo keine sind.

schließlich können die zusätzliche Sensordaten beim Debayering mitgenutzt werden

Das ist mal wieder so ein undefinierter Spruch, ohne jegliche Aussage.
Erstens gibt es keine zusätzlichen Sensortasten, die Daten wären auch in einer herkömmlichen Abtretung vorhanden gewesen und zweitens ist die Bezeichnung "mitbenutzen" mal wieder so eine typische Blog-Aussage, wie "schön" oder "clever".
Sag mir, wie sie "mitbenutzt" werden sollen und diese "Mitbenutzung" artefaktfrei im De-Bayering stattzufinden hat.
Nochmal:
Wenn Du unterschiedliche Pixels miteinander vermischt, verlierst Du die Auflösung der einzelnen Pixels. -Punkt-.
Wenn Du nun wieder damit kommst, dass die Sensorentwicklung ja nicht stehen geblieben ist und es dinge zwischen Himmel und Erde gibt, die wir alle noch nicht begriffen haben, kann Du gern auf der unbekannten Erkenntnis und der Hoffnung, dass es die höheren Mächte bei SONY schon richten werde, allein weiter machen.

Komm mit Fakten und wir reden drüben aber komm mir nicht mit "irgendwie, schön., mitbenutzen oder clever".
Das ist keine Basis. Das funktioniert nur in Fan-Foren.

Die erforderliche Rechenpower für komplexere Algorithmen ist ja schließlich mittlerweile vorhanden.

Hier auch ... welche Algorithmen für welche Rechenpower ?
Mal wieder so ein Griff in die Spruchkiste.

[iasi]

Sag mir, wie sie "mitbenutzt" werden sollen und diese "Mitbenutzung" artefaktfrei im De-Bayering stattzufinden hat.
Nochmal:
Wenn Du unterschiedliche Pixels miteinander vermischt, verlierst Du die Auflösung der einzelnen Pixels. -Punkt-.

Hier auch ... welche Algorithmen für welche Rechenpower ?
Mal wieder so ein Griff in die Spruchkiste.

gut - ich will mich zwar nicht auch zu Spekulationen hinreissen lassen, aber bei dir hört es sich so an, als würde ein Bayer-Sensor die eindeutigen Werte für einen Bildpunkt liefern - weshalb sollte es denn z.B. nicht möglich sein die Bayer-Anordnung zu erweitern und dadurch zusätzliche Daten zu erhalten. Der Rechenaufwand würde sich jedoch erhöhen, wenn zusätzliche Werte berücksichtigt werden müssten.
Wer sagt denn, dass es nur RBGG sein muss - weshalb sollten nicht weitere Helligkeitswerte durch Erweiterung des RBGG realisiert lassen, die dann berücksichtigt werden, wenn normalerweise Full-Well erreicht ist.
Wir sind bei hohen Sensorauflösungen angelangt - es spricht nichts dagegen, diese hohen Sensorauflösungen neu zu bündeln und dabei unterschiedliche "Empfindlichkeiten" zu implementieren.

Ums mal banal auszudrücken: Warum nicht RBGGGG, wobei die beiden Neuen mit ND-Filtern versehen sind?
Die Interpolation wird zwar aufwändiger, aber potente Hardware ist ja vorhanden.

[chmee]

So, wie der Fuji SCCD Sensor in der S5 Pro von vor ~7 Jahren? Bis jetzt lese ich Dinge, die schon existieren. Nun, ich kann nur hoffen, Sony hat einfach ne neue Idee.

..Warum nicht RBGGGG, wobei die beiden Neuen mit ND-Filtern versehen sind? ..

Weil RBGGGG heisst, die R und B-Komponenten würden zu wenig Informationen erhalten. Ein gewisses Raster zur Berechnung der fehlenden Komponenten muss schon erhalten bleiben. Unterscheidet sich dann nicht sehr von dem zeilenweisen Vorgang in DualISO bei ML. Informationen tragen sie immer noch alle (Sensel), sie müssen nur anständig verrechnet werden. (oder auch clever :D) Wieder das Beispiel 5DIII Vollauflösung mit zeilenweise unterschiedlicher ISO, dann aber runtergerechnet auf zB 2K.

mfg chmee

[WoWu]

neu zu bündeln

Iasi ... was ist eine Bündlung ? (oder eine ansständige Verrechnung). Alles solche Blog Begriffe, die einfach nichts aussage und dadurch absolut nicht geeignet sind, solche Themen mit einem Mindestmass an Sinnhaftigkeit zu besprechen.


Und was die Bayernmaske betrifft so generiert sie sehr wohl für jedes Pixel einen Luminanzwert.
Was passiert, wenn Du Werte mehrfach benutzt, siehst Du bei der Chroma Unterabtastung, in der solche Werte einfach aus mehreren Werten zusammengerechnet werden. Dann hättest Du hinterher, je nach Pixelmenge dann wohl 2:2:2 oder vielleicht auch nur noch 1:2:2. Ist es das, was Du willst?

Genau das passiert dann nämlich mit den Luminanzwerten bei doppelt benutzten (oder mehrfach) Pixels.
Du kannst es drehen, wie Du willst.
Wenn Du Pixels zusammenrechnest, verlierst Du Auflösung. da helfen auch keine "cleveren" oder "anständigen" Algorithmen, weil Du einfach das projizieret Bilddetail vervielfachst.
Du kannst ja hier nicht einfach sagen, bei einer "Mistkamera" findet ohnehin keine pixelgenaues Reproduktion statt, folglich verschlechtert die Methode auch nicht das Bild .... Du musst ja Abtastverfahren miteinander vergleichen, die oberhalb der Lochkamera stattfinden.

[iasi]

Weil RBGGGG heisst, die R und B-Komponenten würden zu wenig Informationen erhalten. Ein gewisses Raster zur Berechnung der fehlenden Komponenten muss schon erhalten bleiben. Unterscheidet sich dann nicht sehr von dem zeilenweisen Vorgang in DualISO bei ML. Informationen tragen sie immer noch alle (Sensel), sie müssen nur anständig verrechnet werden. (oder auch clever :D) Wieder das Beispiel 5DIII Vollauflösung mit zeilenweise unterschiedlicher ISO, dann aber runtergerechnet auf zB 2K.

mfg chmee

RBGGGG war nur ein mal hingeworfenes Beispiel, soll aber als GG+GG verstanden werden - eben einmal GG wie üblich und zusätzliche GG für die Lichter, die dann geringer belichtet werden.

Es dürfte dann wohl vor allem auch der weitere Umgang mit den zusätzlichen Sensorinformationen sein, die den besonderen Unterschied ausmachen. Und klar: Die Anordnung ist von Bedeutung.

[iasi]

neu zu bündeln

Iasi ... was ist eine Bündlung ? (oder eine ansständige Verrechnung). Alles solche Blog Begriffe, die einfach nichts aussage und dadurch absolut nicht geeignet sind, solche Themen mit einem Mindestmass an Sinnhaftigkeit zu besprechen.

Das ist hier ein Forum und daher kann und sollte man sich eben auch allgemeinverständlich ausdrücken. Hier mit Fachbegriffe um sich zu werfen, ist der Kommunikation nicht dienlich und kann doch eigentlich nur einem Zweck folgen ...
Simplifikation ist zudem eher angesagt, als wilde Spekulationen ohne Informationshintergrund.

Und was die Bayernmaske betrifft so generiert sie sehr wohl für jedes Pixel einen Luminanzwert.
Was passiert, wenn Du Werte mehrfach benutzt, siehst Du bei der Chroma Unterabtastung, in der solche Werte einfach aus mehreren Werten zusammengerechnet werden. Dann hättest Du hinterher, je nach Pixelmenge dann wohl 2:2:2 oder vielleicht auch nur noch 1:2:2. Ist es das, was Du willst?

Ja - und wenn ich nun eben unterschiedliche Luminanzwert ermittle:
Wie gehabt R und B, dann aber eben GG + GG, wobei zwei G geringer belichtet werden - eben eine Aufspreitzung und nicht nur eine Verdoppelung.

Genau das passiert dann nämlich mit den Luminanzwerten bei doppelt benutzten (oder mehrfach) Pixels.
Du kannst es drehen, wie Du willst.
Wenn Du Pixels zusammenrechnest, verlierst Du Auflösung. da helfen auch keine "cleveren" oder "anständigen" Algorithmen, weil Du einfach das projizieret Bilddetail vervielfachst.
Du kannst ja hier nicht einfach sagen, bei einer "Mistkamera" findet ohnehin keine pixelgenaues Reproduktion statt, folglich verschlechtert die Methode auch nicht das Bild .... Du musst ja Abtastverfahren miteinander vergleichen, die oberhalb der Lochkamera stattfinden.

Wir sind bei 36MPixel - ob ich nun die Pixelzahl wieder reduziere oder sie neu anordnen und erweitert benutze, macht keinen großen Unterschied bei der Auflösung.

Statt einen großen G nehme ich 2 kleiner G, die aber eben unterschiedlich belichtet werden und dann gemeinsam wieder einen Wert liefern, der einen größeren DR aufweist.
Und wenn schon bei der Bildpunktberechnung dieser Wert gebildet wird, ist dies eben ein Vorteil gegenüber HDRx oder ML, die Bildpunkte verrechnen.

[chmee]

Und was die Bayernmaske..

Na gut, dass ich sowas nicht trage :) Und Halloween ist auch vorbei..

Du kannst es drehen, wie Du willst.
Wenn Du Pixels zusammenrechnest, verlierst Du Auflösung. da helfen auch keine "cleveren" oder "anständigen" Algorithmen, weil Du einfach das projizieret Bilddetail vervielfachst. ..

Die Theorie von Auflösungsmaxima in Ehren. Es geht vornehmlich, etwa 99,99% aller User und Zuschauser, um hinreichend scharf, nicht um mathematisch ideal. Die Demosaicing-Algorithmen sind seit Jahren so gut, dass ein Bayer-Pattern in ein natives Komponentenbild umgerechnet werden kann, ohne dass der Auflösungsabfall eklatant ist. Und auch Downscaling wird vom Markt ausgiebig genutzt, um Auflösung zurückzubiegen.. Oder wird die Alexa nativ für das PlayOut genutzt? Nein, vornehmlich landen die Daten in einer 2K/1080p Datei.

Meine Aussage betrachtend, sind aktuelle Debayer-Algorithmen (Komponent-Deltas, 4 anstatt 3 Komponentenbetrachtung und Richtungsvektoren - und auch a1ex's Ansatz der ISO-Verrechnung) "clever" und bezüglich des Ergebnisses "anständig". Da steckt kein hyperblogiges MetaBla dazu, um diese Eigenschaften so zu bennenen.

@iasi
wie gesagt, der Fuji SCCD-Sensor war so eine (recht erfolgreiche) Idee.

mfg chmee

[WoWu]

@ chmee

Das, was ich oben gesagt habe:
Wenn die Kamera sowieso miserabel auflöst, fallen selbst solche Tricks nicht auf.
Funktioniert als nur bei ohnehin schlechten Geräten.

hinreichend scharf

Definier doch "hinreichend" mal am Beispiel HD ... ist das dann SD ? Oder sind das 720P ? Was ist hinreichend ?
Dann können wir nochmal nachrechnen und landen wieder bei den Fakten.

@Iasi
Das Verbreiten von Blog-Schwachsinn macht es noch nicht zu Fakten und hilft ganz sicher auch nicht denen, die in einem solchen Forum vielleicht solche Zusammenhänge begreifen möchten.

Die hilft nur denen, die ihre Phantasien weiter verbreiten möchten und gar nicht präzis werden können, weil sich Phantasien so schlecht mit Fakten zur Deckung bringen lassen.
Schau Dir mal an, wie Pixels im Signalprozess gewichtet werden.

[iasi]

Die hilft nur denen, die ihre Phantasien weiter verbreiten möchten und gar nicht präzis werden können, weil sich Phantasien so schlecht mit Fakten zur Deckung bringen lassen.
Schau Dir mal an, wie Pixels im Signalprozess gewichtet werden.

Man stellt eben auch oft fest, dass "Spezialisten" sich durch ihre enge Betrachtung von techischen Details den Blick auf neue Ansätze verbauen.
Es ist eben auch mal gut, etwas zurückzutreten, um sich einen weiteren Überblick zu verschaffen.

Was nutzt es einen Ansatz, von dem eigentlich nichts Konkretes bekannt ist, schon im Detail besprechen zu wollen.

Wenn - wie chmee schon sagt - ein solcher Ansatz schon genutzt wurde, dann kann er aufgrund technischer Weiterentwicklungen bei der Sensorherstellung und den Recheneinheiten eben heute noch weit besser ausgereizt werden. Mir erscheint es naheliegend, dass die höhere Pixeldichte und die höhere Rechenleistung auch für eine erweiterte Bayer-Technik genutzt wird.
Und meist wird das Rad nicht neu erfunden, sondern schlicht die auf der Hand liegenden Techniken genutzt. Das war mit den Raw-Filmkameras doch auch nicht anderes:
Die Rechenleistung und die Datenträgergeschwindigkeit erlaubte eben irgendwann mal filmgeeignete Frameraten.

Und nun sind wir bei einer Pixeldichte und einer Rechenleistung angelangt, die mehr als nur das bekannte Bayer-Prinzip erlaubt.

Wenn man zusätzlich zu den Signalen, die das übliche RBGG liefern, auf der selben Sensorfläche weitere Signale gewinnen kann, die z.B. durch Unterbelichtung auch noch Abstufungen erlauben, wo der übliche Bayer-Sensor am Ende wäre, dann sehe ich keine unüberwindbaren Hürden, sondern nur einen erhöhten Rechenaufwand.
Der F65-Sensor liefert schließlich auch 4k unter Verwendung von mehr Pixeln - Sony sagt 8k, andere rechnen eher mit 6k - und keiner klagt hier über Auflösungsverluste.

[chmee]

Das, was ich oben gesagt habe:
Wenn die Kamera sowieso miserabel auflöst, fallen selbst solche Tricks nicht auf.
Funktioniert als nur bei ohnehin schlechten Geräten.

Nun, unter dieser Prämisse würde es für eine Arri Alexa heissen: nativ benutzt hat sie eine miserable Auflösung (bayer..), runterskaliert nach 2K wurde billig getrickst (zudem noch aufgrund egal welchen Algorithmus in negativem Ergebnis)

Definier doch "hinreichend"

Ja, diese Frage hat es in sich. Und ich bin mir sicher, dass Du mit der Antwort nicht zufrieden bist.

"Solange die gegebene Auflösung nicht als Makel auffällt"

Es ist völlig ok, wenn aus beruflicher Sicht (Kamera-Footage bis DVD-Authoring) mit bestmöglichen Daten gearbeitet werden kann. Dennoch schaut der Großteil im Netz oder auf dem heimischen TV. Was da ankommt bzw. bezugnehmend auf den Sehabstand, ist ne kleine HD-Auflösung schon ziemlich ok. Das Gleiche betrifft die Fotografie gleichermaßen.

Wer mit der Nase am Objekt steht, hat kein Interesse am Inhalt.

Na? Schön philosophiert, was :)

mfg chmee

[WoWu]

Na ja, Philosophie ist etwas Anderes.
ich würde sagen, mal wieder um eine konkrete Antwort gedurückt denn das kommt immer: "nur die Inhalte zählen". Aber da würde ich sagen:
Thema verfehlt.

@Iasi
Es kommt anscheinend nicht konkretes mehr, (wie eigentlich schon so viele Male vorher.
Ich hatte ja angenommen, nach den vielen Jahren, dass sich mittlerweile einwenig technisches Verständnis auch bei Dir eingestellt hätte, aber wohl nicht.

enge Betrachtung von techischen Details den Blick auf neue Ansätze verbauen.

Sag doch mal welche neuen Ansätze und wie sie im Verhältnis zum hier besprochenen Thema stehen.

Was nutzt es einen Ansatz, von dem eigentlich nichts Konkretes bekannt ist, schon im Detail besprechen zu wollen.

Schade, dass Du den Artikel gar nicht gelesen hast und/oder nicht richtig verstanden hast, was eigentlich darin stand.
Aber selbst wenn man es auch die Bilder beschränkt kann man durchaus konkrete Ansätze daraus erkennen.
Aber vielleicht ja nicht Jeder, das mag sein.

Wenn - wie chmee schon sagt - ein solcher Ansatz schon genutzt wurde, dann kann er aufgrund technischer Weiterentwicklungen bei der Sensorherstellung und den Recheneinheiten eben heute noch weit besser ausgereizt werden.

Erstens hat er auch gesagt, dass es "sch...se" aussieht und dann kommt jetzt von Dir wieder der, zum Himmel geneigte Blick ... der Herrgott hat die Technik weiterentwickelt. (Wir wissen nur noch nicht wie).

Man Iasi, komm mal wieder zurück auf die Erde und lern die Technik mal kennen. Und ein paar Gesetmässigkeiten.
Wobei - etwas verwundert es mich schon, dass Du offenbar nicht wirklich nachvollziehen kannst, dass, wenn zwei Pixels miteinander kombiniert werden, beide die Inhalte beider Pixels tragen.
Das sollte doch nun selbst der Unbedarfteste verstehen.
Ach ja .. der liebe Gott .. hatte ich vergessen.

erscheint es naheliegend, dass die höhere Pixeldichte und die höhere Rechenleistung auch für eine erweiterte Bayer-Technik genutzt wird.

Was für eine erweiterte Bayer-Technik ?
Mal wieder so ein gottgegebenes Hirngespinst.

Und meist wird das Rad nicht neu erfunden, sondern schlicht die auf der Hand liegenden Techniken genutzt.

Stimmt, deswegen hatte ich ja reklamiert.
Danke für die Zustimmung.

Die Rechenleistung und die Datenträgergeschwindigkeit erlaubte eben irgendwann mal filmgeeignete Frameraten.

Neues Thema oder was hat das mit der Gewichtung von Luminanzwerten zu tun?

Wenn man zusätzlich zu den Signalen, die das übliche RBGG liefern, auf der selben Sensorfläche weitere Signale gewinnen kann

Siehe Artikel:
Wo werden da zusätzliche Werte generieret. Von zusätzlichen, extra dafür vorgesehenen Pixels ist keine Rede.

dann sehe ich keine unüberwindbaren Hürden, sondern nur einen erhöhten Rechenaufwand.

Aha, da siehst Du also keine Hürde. Wundert mich das jetzt ?

Der F65-Sensor liefert schließlich auch 4k unter Verwendung von mehr Pixeln - Sony sagt 8k, andere rechnen eher mit 6k - und keiner klagt hier über Auflösungsverluste.

Dann schau Dir die Abtretung mal in Ruhe an. Offenbar hast Du das bisher noch nicht getan.

[chmee]

@WoWu
Was willst Du denn Großartiges nachrechnen? Ich habe lächelnd Deine billig-Downscale-Geräte-Argumentation gekontert - und Dir gefällt doch eh nicht, was nicht aus Deiner Hand ist. Tatsachen sind:

* Die Welt arbeitet munter mit Bayer-Sensoren.
* Die Welt skaliert munter hoch und runter.
* Die Welt guckt munter DVB-T.

Und Du? Fühlst Dich verpflichtet, stimmige Daten auf dem Signalweg zu zählen? Diese Pflicht überlass ich Dir gern.

[iasi]

Schade, dass Du den Artikel gar nicht gelesen hast und/oder nicht richtig verstanden hast, was eigentlich darin stand.
Aber selbst wenn man es auch die Bilder beschränkt kann man durchaus konkrete Ansätze daraus erkennen.
Aber vielleicht ja nicht Jeder, das mag sein.

ja - hast du dir die Patentschrift denn schon mal durchgelesen?
Und vielleicht auch das schon zu Gesicht bekommen, das Sony eben nicht in die Patentshrift reingeschriben hat, weil es eben nicht für alle Welt gedacht ist?

http://www.freepatentsonline.com/y2014/0321766.html

Ich finde es schon beeindruckend, wie schnell du so ein Patent lesen und beurteilen kannst.
Also andere benötigen hier sicherlich mehr Zeit.
Oder solltest du etwa nur den Artikel gelesen haben und nicht die Patentschrift?!

Also ich hatte noch nicht die Gelegenheit allein diesen Anhang eingehend zu studieren:
http://www.freepatentsonline.com/20140321766.pdf
... und dabei sind hier viele Bilder und Diagramme und eben nicht so viele Formeln, wie in der Patentschrift.

Aber immerhin habe ich nun doch eine etwas genauere Vorstellung davon, wie es Sony wohl machen will ... und aus der Patentschrift kann man eben auch erfahren, dass der ganze Prozess nicht auf einen Bayer-Pattern limitiert ist.

Ach ja: Von der ML-Methode unterscheidet es sich doch erheblich.
Die Ãœberschrift "Dual-ISO" scheint mir auch nicht ganz treffend.

[WoWu]

@chmee
Du brauchst gar nicht zu polemisieren.
Sag mir doch einfach, warum Kombinationen von Pixels die Auflösung nicht beeinträchtigen.
Und mit Kontern setzt nicht automatisch voraus, dass das Gekonterte richtig ist.
In deinem Fall war es nämlich nicht so und wenn Du Dir mal die Unterabtastung von Videobildern anschaust, siehst Du das auch selbst.

@Iasi
Natürlich habe ich die Patentschrift gelesen und besonders neu ist das, was sie da tun ja auch nicht, -ich habe oben schon erwähnt, wo es sonst noch angewandt wird, -vielleicht einwenig abgewandelt, aber im Prinzip das gleiche.

Und nun kommst Du wieder mit den "Geheimnissen", die sich zwischen den Zeilen verbergen. -Wie üblich-
Erklär Du mir, warum bei einer Pixelkombination sich die Auflösung nicht negativ verändert.
Kein mensch wird so etwas in ein Patent hineinschreiben, weil es für die Patentanmeldung keine Relevanz hat. Wohl aber für den Anwender, hinterher.

Und schön, dass Du mittlerweile auch bemerkt hast, dass Pixelkombinationen nicht mit der Bayernmaske zu tun haben. Bedank Dich bei dem, der damit angefangen hat.

Es bleibt bei der Benutzung unterschiedlicher Pixel zur Kombination der Luminanzwerte und nun sag mir, wie das ohne Auflösungsverlust funktionieren soll, ohne Gottes Gnaden und Hilfe und irgendwelcher mysteriösen Algorithmen, die der Entwickler mit ins Grab nimmt.

[Bergspetzl]

Zitat:
Definier doch "hinreichend"

Wohl gemerkt es geht hier nur um den Sensor, zum Endprodukt zählen noch weiter Faktoren, die je nach Konstellation zu anderen "Wert" des Endproduktes führen.

Wie will man also zu einem Schluss kommen? Eine abschließende Konstante, also immer Gültige kann es hier so nicht geben, da wir am Anfang der Signalkette ansetzen mit der Diskussion.

Der Ansatz sollte hier aber auf etwas anderes abzielen: Was ist das "Beste" Resultat, um es in den weiteren Verlauf wie Kompression zu übergeben. Mein Endprodukt ist (beispielsweise) 1080 in X Bit. Pro Pixel habe ich einen Luma und Chromawert. Hier möchte ich (angenommen als Grundprinzip) ein neutrales, die Realität weitestgehend wiederspiegelndes Ergebnis erzielen. Bei 10 bit Endprodukt ist das ein Wert aus 1024 Luma Möglichkeiten im entsprechenden Farbsensel. Dieser wird aus einem 10-12-14bit Sensor und der Summe aus RGB filternden Kanälen gewonnen.

Mir als Endkunde ist der "Weg" zu meinem Endsignal demnach egal, denn ich schaue auf den Output, den ich geliefert bekomme. Anstelle der Frage also, was kann die Technik unter "Prämisse X" optimal darf doch die Fragestellung lauten, was wäre für mich das optimale Endergebnis. Das ist dann die Lösung für hinreichend. Nicht optimal für mein jeweiliges Vorhaben, das ist subjektiv, sondern wie sieht das bestmögliche, technische Signal aus? Deswegen sollte man sich darauf einigen, das es egal ist, auf welchem Weg die Pixel generiert werden. Nur wenn mir das Zusammenspiel zwischen Chroma und Luma auf den 1080x1920 großem Feld ideal gelingt , habe ich ein hinreichendes Ergebnis. Definieren sollten wir also zuerst, wieviel Luma, wieviel Chroma gewichtet werden sollte. Am Ende können wir nur einen Wert pro Pixel generieren. Und wenn wir scheinbar (warum ist mir nie klar gewesen) mehr Pixel als Ausgangsprodukt aufnehmen, als das Endprodukt haben wird, ist ein zusätzliches Processing notwendig, welches nach der analogen Datenaufnahme und neben dem de-Bayern in die Signalgestaltung eingreift.

Wie ereichet man dann also das ideale Signal?

Bei einem 36MP Sensor stehen 17,3 Aufnahme-Pixel Pro Endpixel bereit. Bei HD würden aber nur 6/8MP benötigt. Hier ergeben sich alternative Möglichkeiten, da ich ja demnach noch ca 12 Pixel pro später zusammengefastes Pixel "Headroom" habe. Viel Platz, um sich auf einem Sensor auszutoben, ohne die Grundfunktionsweise ins wanken zu bringen, oder hat da jemand Einwände? Ich habe das so verstanden, das Sony kein komplett neues Verfahren aufrollen wird, sondern auf vorhandener "Spielwiese" neue Möglichkeiten testet/einführt/andenkt.

Wowu (ohne ihn angreifen zu wollen) agiert, als wäre alles in Stein gemeißelt. Ist es aber nur durch die Anwendung bestimmter Verfahren. Jedoch ist es ebenso wahrscheinlich, das Verfahren optimiert und erweitert werden können. Mich würde interessieren, ob du seinerzeit eigentlich CCD verteidigt hast (es ist so und wird sich nie ändern) oder CMOS gepriesen hast und es als das Maß aller Dinge siehst. Immerhin gab es einen Punkt, als CMOS zu CCD aufgeholt und dann überholt hat. [/i]

[iasi]

@Iasi
Natürlich habe ich die Patentschrift gelesen und besonders neu ist das, was sie da tun ja auch nicht, -ich habe oben schon erwähnt, wo es sonst noch angewandt wird, -vielleicht einwenig abgewandelt, aber im Prinzip das gleiche.

na klar - das sagte ich ja schon. Aus meiner Sicht lag und liegt diese von Sony nun genutzte Technik mittleweile auf der Hand.

Und nun kommst Du wieder mit den "Geheimnissen", die sich zwischen den Zeilen verbergen. -Wie üblich-

aber eben diese "Geheimnisse" machen eben nun einmal den Unterschied z.B. zwischen einem Dieselmotor und einem anderen aus
oder zwischen einem Bayer-Sensor und einem anderen.
Keiner behauptet, dass Red mit seinem Codec das Rad neu erfunden hätte, aber die Umsetzung macht es eben aus, worauf Red so stolz ist.

Erklär Du mir, warum bei einer Pixelkombination sich die Auflösung nicht negativ verändert.

Ich erinnere mich da immer an die Sigma-Argumentation: Ein Bayer-Sensor hätte auch keine höhere Auflösung als ein hochgerechnetes Foveon-Bild.

Grob betrachtet kann man zwar nicken, aber ganz so simpel ist es eben doch auch nicht.
Und nochmal: Der F65-Sensor hat nach Sonys-Rechnung 8k - und liefert 4k. Auch wenn hier auch die Werbetrommel durchschallt, hast du eine größere Anzahl von Pixeln, als bei einem Bayer-Sensor eigentlich üblich. Es liegt doch nahe, dass man daraus einen Nutzen zieht, wie es Sony wohl beabsichtigt.

Kein mensch wird so etwas in ein Patent hineinschreiben, weil es für die Patentanmeldung keine Relevanz hat. Wohl aber für den Anwender, hinterher.

Und schön, dass Du mittlerweile auch bemerkt hast, dass Pixelkombinationen nicht mit der Bayernmaske zu tun haben. Bedank Dich bei dem, der damit angefangen hat.

Wobei das aber eben nach Sonys-Aussage keine Rolle spielt - die "Anordnung spielt keine Rolle.

Es bleibt bei der Benutzung unterschiedlicher Pixel zur Kombination der Luminanzwerte und nun sag mir, wie das ohne Auflösungsverlust funktionieren soll, ohne Gottes Gnaden und Hilfe und irgendwelcher mysteriösen Algorithmen, die der Entwickler mit ins Grab nimmt.

Na - beim Bayer-Sensor sind es doch auch die Algorithmen, die aus einem G-Pixel einen Bildpunkt zaubern.
Ich sage ja auch nicht, dass man aus einem solchen 4k-Sensor eine 4k-Auflösung herausholen kann.
Aber aus 6k wären wohl durchaus 4k zu erreichen - mal nur so grob geschätzt.

Ich finde die Herangehensweise von Sony eigentlich logisch: Schon anhand der Pixelwerte werden Überblendungs- und Blur-Kooeffizienten ermittelt, die dann in die Verrechnung der Bilder einfließen. Es entsteht zudem auch nicht der Zeitversatz, wie bei HDRx.
Du musst doch auch zugeben, dass dies die eleganteste Lösung für HDR ist - auch wenn sie Auflösung kosten mag.

PS: Mich wundert, dass gerade du nun den Auflösungsverlust so sehr beklagst.
Sony vergrößert nicht einfach die Pixel, sondern kombiniert eben unterschiedlich belichtete Pixel. Wenn du die E-Anordnung nimmst, hast du eben statt einem großen R-Pixel 2 länger und 2 kürzer belichtete R-Pixel. Dann braucht man aber eben wirklich viele davon, um am Ende z.B. 4k zu erreichen - fast schon 10k.

[WoWu]

@Bergspetzl

Nein, Bergspitz, nichts ist in Stein gemeisselt. Ich habe "damals" nicht nur CMOS bevorzugt sondern sogar MOS, die mit sehr viel weniger Verstärkern und deutlich höherer lichtempfindlicher Fläche auskommen.
Das einzige, was bei mir "in Stein gemeisselt" ist, ist die Forderung, dass es sich bei HD um 1920x1080 optisch aufgenommene Bilddetails handelt und nicht um die Anzahl der Pixels.
Darin unterscheiden wir uns offenbar. Ich zähle nämlich nicht die Pixels sondern die Bilddetails.
Darin unterscheiden wir uns offenbar. Und wohl auch noch darin, dass Du sagt, ein guter Bildeindruck reicht Dir, ich aber sage, dass ich, wenn ich HD (oder UHD) kaufe, auch HD (oder UHD) Bildpunkte sehen möchte und nicht etwas kaufe, das aus einem unscharfen Bild errechnet wurde und nur "Puerto" scharf aussieht.
Das zu kaufen überlasse ich gern denen, die Omas Geburtstag damit aufnehmen.
Ich komm nun mal auch der professionellen Ecke, die sich nicht so leicht ein X für ein U vormachen lässt.
Und wenn man, in Bezug auf dieses Sony verfahren sieht, dass sie aus je einem 7 x 7 Pixel Array ihre Bildinhalte bedienen, kann man sich sehr schön ausrechnen, wie hoch die verbleibende reale Bildauflösung sein wird.
(Urbehagens sind in der Patentschrift die Verfahren relativ genau beschrieben.)

Komischerweise kochen ja alle immer noch mit Wasser (auch in diesem verfahren benutzen sie eigentlich nur die Kombination aus den klassischen HDR Verfahren- also keine gottgegebenen neuen mystischen Algorithmen) und daher ist, mit einwenig technischen Kenntnissen, auch das Ergebnis ziemlich genau vorhersehbar.
Aber das ist eben das, was ich immer sage ... es kommt auf den Anspruch an. Manche wollen eben nur 1920x1080 Pixels und ich will eben 1920x1080 Bilddetails. (Oder eben das Äquivalent in UHD).

Jedem das Seine und nichts dagegen einzuwenden, wenn Andere mit Weniger auskommen.
Trifft für mich aber nicht zu, deswegen schaue ich auch genauer hin.
Aber für Omas Geburtstag reicht natürlich auch die interpolierte Version, da gebe ich Dir völlig Recht, das ist für eine solche Anwendung sicher "hinreichend' und der Aufkleber macht die "Musik".

[iasi]

Weshalb sollte Sony aus 2x2x2 Pixel, die die selbe Fläche einnehmen, wie die bisherigen 2x2, weniger Detail herausholen können?

Es stehen schlicht für einen Bildpunkt mehr Informationen zur Verfügung.

Sony erzielt dadurch einen größeren DR und wohl auch akuratere Interpolationen - dazu muss eben die Pixelzahl erhöht werden, was aber heute offensichtlich kein großes Problem mehr darstellt.

Wo also siehst du einen Auflösungsverlust?
Zumal bei HD/2k ...