RawRefinery: Open Source KI-Entrauschung für Raw-Bilder

[cantsin]

Gerade erst entdeckt: RawRefinery, https://github.com/rymuelle/RawRefinery

Ein Open Source-Programm, dass Raw-Fotos per KI-/Machine Learning entrauscht, also das gleiche macht, wie z.B. die KI-Denoiser von Adobe und DxO, wobei die Funktionalität der von DxO PureRaw entspricht: vorhandene Raws werden entrauscht und als entrauschte DNGs neu gespeichert, so dass man sie dann anschließend mit einem Raw-Entwickler (einschließlich der Open Source-Programme Darktable und RawTherapee) entwickeln/prozessieren kann.

Die Installation ist nicht ganz trivial, weil RawRefinery - wie so viele KI-Tools - auf Python und Torch basiert, und man alles mit Pythons pip-Paketmanagement installieren muss. Die Installationsanleitung auf der Github-Seite (s.o.) ist eigentlich gut... Nur hatte ich das Problem, dass die dort vorgeschlagene etwas ältere Torch-Version meine Nvidia RTX 5070 noch nicht unterstützt und ich erst mal händisch basteln musste, um die passende Version (128 statt 126; 130 war wiederum zu neu und brauchte Nvidia-Bibliotheken, die es auf meinem System noch nicht gibt...) zu finden.

Eine schnelle GPU ist Pflicht für dieses Programm. (Denoising nur über CPU geht auch, dauert dann aber ca. eine Stunde pro Bild...)

Die Ergebnisse sprechen allerdings für sich. Hier mal ein sehr rauschiges Raw-Foto, das mit einer alten Nikon 1-Kamera (1"-Sensor bei ISO 3200...) aufgenommen wurde, ohne Rauschfilterung in Darktable prozessiert:

DSC_5658-dt.jpg

Entrauscht in RawRefinery, mit identischen Parametern wie oben in Darktable prozessiert:

DSC_5658_denoised-dt.jpg

1:1-Crop-Vergleich:

DSC_5658-dt-crop.png

DSC_5658-dt-denoised-crop.png

IMHO performt das Tool auf ähnlichem Niveau wie die KI-Entrauschung von Adobe und DxO.

Was das mit Video zu tun hat? Erst mal nicht viel, allerdings kann man diesen Denoiser auch für CinemaDNG verwenden. Hier gibt es ein Kommandozeilen-Frontend für RawRefinery, mit dem sich Batch-Entrauschungen ganzer Dateisammlungen erledigen lassen:
https://github.com/rymuelle/RawForge

Und hier hat jemand ein Plugin für Darktable gebaut, mit dem sich Rawforge/RawRefinery direkt in das Programm einbinden lässt:
https://github.com/AyedaOk/DT_custom_sc ... /README.md

[cantsin]

Nachtrag:
RawRefinery bietet verschiedene KI-Modelle und Parameter zur Entrauschung an: "Tree Net Denoise", "Tree Net Denoise Light", "Tree Net Denoise Super Light", "Tree Net Denoise Heavy". Mit "Tree Net Denoise Heavy" + Grain=4 komme ich zu den besten Ergebnissen, die weniger künstlich geglättet sind:

DSC_5658_denoised-heavy-dt-crop.png

[cantsin]

Nachtrag dazu: Wie der Entwickler von Raw Refinery auf einem Forumposting erklärt, fügt der "Grain"-Parameter dem Bild nicht etwa künstliches Korn/Rauschen hinzu, sondern belässt den entsprechenden Prozentsatz des ursprünglichen Bildrauschens im Bild, so dass "4% Grain" einer 96%-Entrauschung enspricht.

Im Prinzip funktioniert hier Raw Refinery genauso wie die Entrauschfunktionen von Adobe und DxO, nur dass die Parameter/das UI ein bisschen idiosynkratisch benannt sind.