Also, einfacher ausgedrückt: die Reise geht hin zur Verschmelzung von Smartphone-Fotografie und den heutigen KI-Bildgeneratoren wie DALL-E und Stable Diffusion. Die Smartphones werden eine ähnliche KI haben wie das heutige "img2img"-Modul von Stable Diffusion, das bereits solche Transformationen beherrscht:"KI ist eine der größten Entwicklungen im Bereich der Kameras, und Judd Heape, der führende Kamera-Entwickler bei Qualcomm, glaubt, dass sie in Zukunft den gesamten Bildaufnahmeprozess übernehmen könnte.
Der Einsatz von KI hat sich seit den 2018 erstmals vorgestellten Modi weiterentwickelt, aber Heape erklärt, dass KI in der Fotografie in vier Stufen unterteilt werden kann.
Die erste Stufe ist recht einfach: KI wird eingesetzt, um ein bestimmtes Objekt in einem Bild oder einer Szene zu erkennen. In der zweiten Stufe steuert die KI die sogenannten 3A-Funktionen, nämlich Autofokus, automatischen Weißabgleich und automatische Belichtung. Der Qualcomm-Ingenieur geht davon aus, dass sich die Branche derzeit in der dritten Phase der KI-Fotografie befindet, in der die KI eingesetzt wird, um die verschiedenen Segmente oder Elemente der Szene zu erkennen.
Laut Heape sind wir etwa drei bis fünf Jahre von dem heiligen Gral entfernt, bei dem KI das gesamte Bild verarbeitet:
'Stellen Sie sich eine Welt aus der Zukunft vor, in der Sie sagen: "Ich möchte, dass das Bild wie diese National Geographic-Szene aussieht", und die KI-Engine sagt: "Okay, ich werde die Farben, die Textur, den Weißabgleich und alles andere so anpassen, dass es wie das Bild aussieht, das Sie mir gerade gezeigt haben".
[...]
Sony hat Anfang des Jahres einige interessante Behauptungen aufgestellt, als ein Manager vorhersagte, dass Fotos von Smartphones in den nächsten Jahren die Bilder von DSLR-Kameras übertreffen werden. Das ist leicht auszumalen, wenn man den Fortschritt berücksichtigt, der bei Smartphones durch bessere Bildverarbeitung erzielt wurde. Aber Telefone haben aufgrund ihres dünneren Formfaktors im Vergleich zu DSLRs immer noch kleinere Komponenten.
Dies räumt Heape ein, obwohl er nach wie vor davon ausgeht, dass Smartphones herkömmliche Kameras hinter sich lassen werden. "Wenn es darum geht, die Bildqualität einer DSLR zu erreichen, ja. Ich denke, der Bildsensor ist so weit, und ich glaube, dass die Innovationen, die in mobile Bildsensoren einfließen, wahrscheinlich schneller und fortschrittlicher sind als in der übrigen Branche."
Er führt weiter aus, dass die in Smartphones verfügbare Prozessorleistung einen erheblichen Vorteil gegenüber DSLR-Kameras darstellt:
Das Processing im Snapdragon ist zehnmal besser als bei den größten und leistungsfähigsten Kameras von Nikon und Canon. Deshalb sind wir in der Lage, bei der Bildqualität neue Maßstäbe zu setzen. Denn obwohl wir ein kleines Objektiv und einen kleinen Bildsensor haben, verarbeiten wir ein Vielfaches von dem, was eine DSLR-Kamera leisten kann."
Wenn Du mal mit DALL-E oder Stable Diffusion experimentierst, geht das genau das - aber natürlich nur als Bild.roki100 hat geschrieben: ↑Mo 03 Okt, 2022 17:07Das liest sich wie damals im Jahr 1995, als es darum ging, wie Autos im Jahr 2000 aussehen werden:
'Stellen Sie sich eine Welt aus der Zukunft vor, in der Sie sagen: "Bring mich nach New York", und die KI-Engine sagt: "Okay, ich fahre dich nach New York".
Mein Google Pixel (6 Pro) speichert optional RAW-DNGs, die auch tatsächlich undebayerte DNGs sind, die sich mit RawTherapee, Lightroom & Co. bearbeiten lassen [inkl. in RawTherapee einstellbarer Debayer-Algorithmen und optional undebayerter RGGB- Bildanzeige - also wirklich keine debayerten 16bit-TIFFs im DNG-Container].dienstag_01 hat geschrieben: ↑Mo 03 Okt, 2022 23:57Was wird z.B. in Smartphones gemacht: je nach Helligkeit werden einzelne Fotozellen als einzelne Fotozellen ausgelesen oder zu Gruppen zusammengeschaltet.
Meine Frage: macht das dann der RAW-Entwickler auch?
Wahrscheinlich wird man irgendwann über unsere Vorliebe für RAW verwundert lächeln ;)
Oder eher: Das ist die RAW-Simulation einer KI-Datei ;)cantsin hat geschrieben: ↑Di 04 Okt, 2022 00:17Mein Google Pixel (6 Pro) speichert optional RAW-DNGs, die auch tatsächlich undebayerte DNGs sind, die sich mit RawTherapee, Lightroom & Co. bearbeiten lassen [inkl. in RawTherapee einstellbarer Debayer-Algorithmen und optional undebayerter RGGB- Bildanzeige - also wirklich keine debayerten 16bit-TIFFs im DNG-Container].dienstag_01 hat geschrieben: ↑Mo 03 Okt, 2022 23:57Was wird z.B. in Smartphones gemacht: je nach Helligkeit werden einzelne Fotozellen als einzelne Fotozellen ausgelesen oder zu Gruppen zusammengeschaltet.
Meine Frage: macht das dann der RAW-Entwickler auch?
Wahrscheinlich wird man irgendwann über unsere Vorliebe für RAW verwundert lächeln ;)
Aber in diese DNGs steckt trotzdem bereits die ganze 'computational photography' bzw. KI-Prozessierung des Telefons (auf der heutigen "Stufe 3", wie sie der Qualcomm-Manager nennt), inkl. HDR-Zusammenrechnung von Bildreihen mit Tonemapping und temporaler Entrauschung. Wenn man diese DNGs dann im Raw-Konverter öffnet, sind die immer perfekt belichtet - bis hin zu Spitzlichtern, die im Waveform-Monitor genau oben sitzen, aber nicht clippen.
Genaugenommen ist das bereits die KI-Simulation einer Raw-Datei.
Dazu gibt's auch ein schönes Interview mit jemandem, der am MIT zu diesem Thema arbeitet:
Money quote des MIT-Forschers: "Photo realism is dead. We should just bury it, and it's all about hallucination".
In der Forschung ist KI ein weites Gebiet, aber in der Industrie bzw. kommerziellen Anwendung ist "KI" (AI) seit einem guten Jahrzehnt gleichbedeutend mit auf neuronalen Netzen basiertem machine learning bzw. Deep Learning.vaio hat geschrieben: ↑Di 04 Okt, 2022 09:25Bei „KI“ sollte eigentlich unterschieden werden, ob es für realitätsnähere Aufnahmen genutzt wird - quasi als Ergänzung zur verbauten (bauartbedingt limitierten oder/und preiswerteren) Kameratechnik, oder ob es für einen bestimmten Look verwendet wird. Die Kombination von beiden ist vermutlich am häufigsten anzutreffen.
Ich habe das Gefühl, dass der Begriff „KI“ mittlerweile in jeder App u. Hardware marketingmäßig Verwendung findet. Ähnlich wie in den 90‘er „Multimedia“.
Das ist nur eine symbolische Illustration der Zusammenarbeit von Xiaomi mit Leica.
Damit wären doch schöne Telebrennweiten möglich :-)
Ne das gab es schon, ist leider geflopt. Auch die Aufsätze mit größeren Sensor (Olympus, Sony). Die Zukunft bleibt klein :PDarth Schneider hat geschrieben: ↑Mi 02 Nov, 2022 09:59Ist doch nur eine Frage der Zeit, dann werkeln MFT Sensoren in Smartphones…
Gruss Boris
Mit dem neuen M2 Max Prozessor stell Apple seinen bislang leistungsstärksten Notebook-Prozessor vor. Mit jetzt 12 CPU- und 38 GPU-Kernen tritt Apples aktuellstes Unified Memory-Design an, nochmal mehr Performance für die Bereiche Videoschnitt, Compositing und Farbkorrektur zur Verfügung zu stellen. Wie dieser Performance-Zuwachs in der Schnitt-Praxis aussieht, klärt unser erster Test des neuen MacBook Pro mit M2 Max Prozessor mit diversem 10-16 Bit Videomaterial. weiterlesen>>
Die 8000er Serie stellt die aktuellste Version von Sennheisers weit etablierter, professioneller MKH-Serie dar. Innerhalb des 8000er Mikrofon-Portfolios ordnet Sennheiser dem (aktuell kaum verfügbaren) MKH 8060 Richtrohrmikrofon die Anwendungsbereiche Spiel- und Dokumentarfilm, Outdoor- sowie Studioaufnahmen zu. Damit darf es durchaus auch als moderne Variante des Sennheiser MKH 416 gelten, das nach wie vor das Richtrohr-Referenzmikrofon bei slashCAM darstellt - Zeit für eine neue Referenz? weiterlesen>>
