Bladerunner
Beiträge: 13

Re: Video enhance AI Tool: Videos selbst hochinterpolieren - aus SD wird HD, aus HD wird 4K

Beitrag von Bladerunner » Mi 26 Feb, 2020 09:00

Ergänzung zum Beitrag von gestern:

Auch bei mir ist der Modus "Upsampling HQ-CG" von Anfang an der einzig Brauchbare.
Der Modus "Upsampling HQ" ist selten hilfreich, da hier die Schärfe zwar etwas höher ist, aber erst Recht Strukturen und Gesichter nahezu "zerstört"
Der Modus "Upsamling LQ" erzeugt ein deutlich unreineres Bild mit zusätzlich erzeugten Artekfakten.

HIer sei noch bemerkt, dass ich mit Video-Material 480p und niedriger experimentiere.

Weitere Erfahrungen dem Tool:
- das Rendern geht verhältnismäßig schnell und gleich ungefähr dem Tempo, was ich bei Neat Video habe (RTX 2060, 8GB im Einsatz)
- das Deblocking ist sehr beeindruckend
- Kanten werden in der Regel beeindruckend geglättet ("stabilisiert")
- Bildrauschen wird meist vollständig beseitigt
- Die Bildschärfe wird gerade bei Kanten sichtbar erhöht (nicht übertrieben). Leider führt das bei Gesichtern zu z.B. Überschärfungen im Augenbereich.
- in einigen wird das gesamte Bild leider zu stark geglättet, dass das Bild unnatürlich wirkt. Hier braucht man definitiv manuelle Anpassungsmöglichkeiten
Windows 10 64Bit, i7 4790 Quad-Core, 32GB Ram, AS Rock Z97 Extreme 4, NVidia GeForce GTX 2060, Sony AX53 4K, DJ Mavic Air, GoPro5 Black Hero, Magix Video Deluxe 2019, Cyberlink Power Director 18/19, Davinci Resolve, Adobe (all applications)




Asjaman
Beiträge: 172

Re: Video enhance AI Tool: Videos selbst hochinterpolieren - aus SD wird HD, aus HD wird 4K

Beitrag von Asjaman » Mo 30 Mär, 2020 09:26

Ich habe die Demoversion von Topaz Video Enhance (1.2.0) installiert und musste gleich entsetzt feststellen, dass dort kein Deinterlacer integriert ist. Das heißt, man muss diesen Schritt vorher gehen und verliert damit durch die Neu-Encodierung bereits an Qualität.
Das Programm wäre für mich also nur interessant, wenn es die nativen Dateien mit allem Nötigen verarbeiten kann. Dieser ganze alte SD-Kram sowie auch HDV sind doch allermeistens interlaced, deshalb verstehe ich nicht, wieso Topaz das nicht gleich berücksichtigt und hochwertiges De-Interlacing integriert. Immerhin heißt es auf der Website: "We are working on a deinterlacer AI at this moment, stay tuned."




Bladerunner
Beiträge: 13

Re: Video enhance AI Tool: Videos selbst hochinterpolieren - aus SD wird HD, aus HD wird 4K

Beitrag von Bladerunner » Mo 30 Mär, 2020 11:08

Ich habe nun seit Wochen Video Enhance AI umfangreich im Einsatz; nach wie vor in der Testversion, die ich mir habe verlängern lassen.
Mittlerweile ist die Version 1.2.0 veröffentlich, die man downloaden kann.
Seit den letzten Updates wird nun auch Audio verarbeitet und bei Einsatz von GTX/RTX sieht man deutlich Performance-Verbesserungen.
Gesichter und Strukturen werden seit den letzten Versionen zum Glück nur noch in seltenen Fällen "zerstört".
Nur mit dem Modus CG erreiche ich deutliche Verbesserungen bei altem VHS/SVHS/Hi8-Material. Und die sind in der Regel sehr sehr beeindruckend. Bedenkt man, dass das Ausgangsmaterial wirklich sehr "dirty" ist (Bildrauschen auf höchstem Niveau, Blöckchenbildungen über das ganze Bild, ausgefranzte/undeutliche Kanten, Unschärfe sowieso), grenzt das fast schon an Zauberei, was Video Enhance AI, da teilweise leistet. Eigentlich hatte ich mal' gelernt "Garbage in/Garbage out" und verschlimmbessert solche Videos nur. Da habe ich in den letzten Wochen ganz andere und sehr positive Erfahrungen gemacht.
ALLERDINGS: die Schwäche des Tools liegt beim CG-Modus im Addieren von neuen Artefakten/Strukturen. Das passiert nicht bei jedem Clip. Meist werden die netzartigen/punktartigen Artefakte bei Landschaftsaufnahmen z.B. Pflanzen, Bäumen und Gras dazuaddiert; mal stärker/größer und mal weniger ausgeprägt. Offenbar ist die AI immer noch am lernen, wie mit Pflanzen, Gräsern usw. umzugehen ist. Ob das überhaupt jemals möglich sein wird, weiß ich nicht.
Ich habe aber längst einen Workflow herausgefunden, dies einigermaßen in den Griff zu bekommen. UND, die Ergebnisse sind teilweise unfassbar; gerade im vorher/nachher-Vergleich:
1. AVI-Material mit Tmpgenc Masterworks 6 oder 7 mit Deinterlace im Modus HIGH PRECISION deinterlacen und mit 1280x720, 25FPS, 30Mbit in MP4 rendern
2. Das neue v.g. MP4 mit Neat Video entrauschen....aber nur ganz "zart"...bis das Bildrauschen im Himmel fast verschwunden ist (nur fast!) (nutze es in Magix Video ProX)
3. Color Grading im Himmel vornehmen >>> bei VHS/S-VHS/HI8 war der Himmel damals meist lila..(nutze das Farbanpassungstool in Magix Video ProX...sehr schnell/einfach dafür)
4. Video Enhance im Modus CG und 200% rendern lassen
5. Color-Grading am besten in meinem Fall = ColorDirector von Cyberlink (funktioniert ähnlich wie z.B. Luminar...von daher einfach und schnell und hat Bewegungsverfolgung)
Das klingt natürlich nach viel Arbeit im Vorfeld und danach....stimmt! :-) Aber, die Ergebnisse lohnen sich definitiv. Ich hätte nie gedacht, dass ich aus dem altem, schlechten Material mal' so viel herausholen könnte. Natürlich sieht das Endergebnis nicht wie 1080p/2K oder 4K aus.....
Windows 10 64Bit, i7 4790 Quad-Core, 32GB Ram, AS Rock Z97 Extreme 4, NVidia GeForce GTX 2060, Sony AX53 4K, DJ Mavic Air, GoPro5 Black Hero, Magix Video Deluxe 2019, Cyberlink Power Director 18/19, Davinci Resolve, Adobe (all applications)

Zuletzt geändert von Bladerunner am Mo 30 Mär, 2020 13:42, insgesamt 2-mal geändert.




cantsin
Beiträge: 6896

Re: Video enhance AI Tool: Videos selbst hochinterpolieren - aus SD wird HD, aus HD wird 4K

Beitrag von cantsin » Mo 30 Mär, 2020 11:35

Bladerunner hat geschrieben:
Mo 30 Mär, 2020 11:08
Aber, die Ergebnisse lohnen sich definitiv. Ich hätte nie gedacht, dass ich aus dem altem, schlechten Material mal' so viel herausholen könnte.
Könntest Du vielleicht Beispielbilder oder -videos hochladen? Das wäre sehr interessant und hilfreich!




Bladerunner
Beiträge: 13

Re: Video enhance AI Tool: Videos selbst hochinterpolieren - aus SD wird HD, aus HD wird 4K

Beitrag von Bladerunner » Mo 30 Mär, 2020 12:01

cantsin hat geschrieben:
Mo 30 Mär, 2020 11:35
Bladerunner hat geschrieben:
Mo 30 Mär, 2020 11:08
Aber, die Ergebnisse lohnen sich definitiv. Ich hätte nie gedacht, dass ich aus dem altem, schlechten Material mal' so viel herausholen könnte.
Könntest Du vielleicht Beispielbilder oder -videos hochladen? Das wäre sehr interessant und hilfreich!
Ja, wenn ich das eine Projekt abgeschlossen habe, kann ich das sicher mal auf Youtube oder Vimeo laden.
Windows 10 64Bit, i7 4790 Quad-Core, 32GB Ram, AS Rock Z97 Extreme 4, NVidia GeForce GTX 2060, Sony AX53 4K, DJ Mavic Air, GoPro5 Black Hero, Magix Video Deluxe 2019, Cyberlink Power Director 18/19, Davinci Resolve, Adobe (all applications)




Serge
Beiträge: 56

Re: Video enhance AI Tool: Videos selbst hochinterpolieren - aus SD wird HD, aus HD wird 4K

Beitrag von Serge » Mo 30 Mär, 2020 16:08

Interessant wäre ein Vergleich desselben mit dem (schon älteren und kostenlosen) "Neural network resizer NNEDI3", siehe auch:
https://forum.blackmagicdesign.com/view ... 59#p603885

marty_mc hat geschrieben:
Do 20 Feb, 2020 17:50
Ok, Leute, jetzt hab ich es endlich geschafft, ein wenig miniDV und DVCam Material durch diese Enhance Video AI Software zu schicken. Guckst euch an, es sind erstmal ein paar Testaufnahmen für euch.

Vorweg: Es ist nix zum staunen, aber interessant allemal. Das PRoblem ist eben die Kamera mit ihrer Kantenanhebung und auch DV mit der 4:2:0 Farbkodierung.
Die entstandenen Artefakte stören mich nicht so sehr. Eher finde ich die maue/akutell unscharfe Version des Films nicht so gut.
Das Material der DVCam Aufnahmen ist besser, da die Kamera (Sony DSR 500 WSP) dann doch schärfer aufgelöst hatte.

Viel Spaß beim reinschnuppern. Ich denke mal, in 4 bis 6 Wochen habe ich die etwas schärfere Version vom "Teufel von Rudow" auf Amazon Prime hochgeladen/ersetzen . Mal schauen.




Frank Glencairn
Beiträge: 10704

Re: Video enhance AI Tool: Videos selbst hochinterpolieren - aus SD wird HD, aus HD wird 4K

Beitrag von Frank Glencairn » Mo 30 Mär, 2020 16:55

Das ist doch schon ganz beachtlich.




Serge
Beiträge: 56

Re: Video enhance AI Tool: Videos selbst hochinterpolieren - aus SD wird HD, aus HD wird 4K

Beitrag von Serge » Sa 04 Apr, 2020 22:26

Quintessenz nach einigen Tests mit "Video Enhance AI" und SD-Material:

Für gute Resultate braucht es als erstes einen sehr guten Deinterlacer.
Als weiteres hängt sehr viel von der Auflösung der verwendeten Kamera ab. Bilder meiner alten PD-170 ergeben ein sehr viel besseres Upscaling, als die meiner Ein-Chip TRV-10 (siehe Anhänge).

Je niedriger die Auflösung, desto unwirklicher werden die Resultate, bzw. selbst bei HQ SD-Material ist es fraglich, wie viele gesichtslose Phantome es auf einem 55“ TV im Hintergrund verträgt. Von dem her müssen Bildteile isoliert werden können, was mit einem Plug-In einfacher wäre als mit einer standalone Software.

Bei VHS oder noch geringerer Auflösung würde ich den schon älteren NNEDI3 Upscaler bevorzugen, da dieser viel subtiler arbeitet und auch (nach dem Deinterlacing übrig gebliebene) treppenstufige Kanten glättet. Dieser in Verbindung mit temporaler Rauschunterdrückung liefert vielleicht etwas weniger scharfe Bilder, doch sieht, was hinten rauskommt, weniger glattgebügelt und rekonstruiert aus (im Vergleich zu AI LQ. HQ ist für Low-Res / VHS meiner Meinung nach kaum brauchbar).
Du hast keine ausreichende Berechtigung, um die Dateianhänge dieses Beitrags anzusehen.




Social Media

       
 Aktuelle Beiträge [alle Foren]
 
» FCP X Bitrate MP4 einstellen
von acrossthewire - So 17:13
» Der Nächste: Nikon sagt die NAB 2020 wegen Coronavirus ab
von acrossthewire - So 17:10
» Blackmagic Design: Atem Mini Pro Switcher mit integriertem H.264-Encoding für Live-Streaming
von Valentino - So 16:57
» Ein neues Audiostudio einrichten
von pillepalle - So 16:40
» Wie stark trifft Euch Corona?
von Drushba - So 16:34
» Fujifilm X-T4 manual
von cantsin - So 16:21
» NEU Rode NTG3B
von HerrVonundZuWolf - So 15:48
» MSI: Laptop Update bringt Nvidia GeForce RTX Super GPUs und neue Intel CPUs
von slashCAM - So 15:42
» GC-PX100BE: kann nicht auf SD-Karte aufnehmen
von Jott - So 14:34
» Die Andere Seite - ein Kurzfilm (Crime/Drama) - Ein Mann begegnet einer mysteriösen, jungen Frau am Ufer eines Flusses.
von Chromium - So 14:27
» Was schaust Du gerade?
von Darth Schneider - So 13:50
» Alles scharf: Forscher entwickeln extrem dünne Diffraktionslinse
von slashCAM - So 12:54
» Der Penny auf der Reeperbahn
von MK - So 12:37
» >Der LED Licht Thread<
von Tscheckoff - So 11:33
» Fujifilm Service
von Jörg - So 10:57
» Heimcomputerszene in der DDR
von 7River - So 10:26
» Heute Abend Blackmagic Ankündigungen per Live Stream - auch bei uns
von rush - So 9:59
» Neues Marketing neues Glück?
von klusterdegenerierung - So 9:52
» Panasonic EVA1 5,7K RAW mit dem Blackmagic Video Assist 12G HDR
von rideck - So 9:42
» Tales From The Loop vs Das Blaue Palais
von iasi - So 8:45
» Sehr interessanter YT Kanal
von roki100 - So 8:20
» Haltet euch fit
von Asjaman - So 8:06
» Lumix GH4 mit Ninja V
von micha2305 - So 1:01
» Video enhance AI Tool: Videos selbst hochinterpolieren - aus SD wird HD, aus HD wird 4K
von Serge - Sa 22:26
» Lavalier Mikrophone für Headset und Interviews gesucht
von cantsin - Sa 22:17
» G9 gut oder doch lieber die GH5?
von roki100 - Sa 20:58
» Panasonic NV-GS60
von big_brother1997 - Sa 18:09
» 1200mm post billig Tele Quali einschätzen?
von roki100 - Sa 17:19
» Blamiert man sich mit MB Flags?
von mash_gh4 - Sa 17:15
» Latenzarm und kompatibel
von mash_gh4 - Sa 16:42
» Arca-Swiss-Klemme für Schnellwechselplatte des DJI Ronin SC
von Kamerafreund - Sa 16:28
» Neuheiten an Kamerataschen
von Jörg - Sa 14:37
» Ist es erlaubt, eine Dienstkleidung für eigene Zwecke zu benutzen?
von dienstag_01 - Sa 14:09
» (V) DJI OSMO POCKET, Unterwassergehäuse & Zubehör
von schlaflos011 - Sa 11:32
» (V) Sennheiser Mikro MKE400
von schlaflos011 - Sa 11:24
 
neuester Artikel
 
Blackmagic RAW mit der Panasonic EVA1

Der Blackmagic Video Assist 12G HDR kann einer Panasonic EVA1 5,7K (B)RAW entlocken. Kann diese Kombination der kleinen Varicam noch einmal neues Leben einhauchen? weiterlesen>>

Canon EOS-1D X Mark III

Mit der Flaggschiff Canon EOS 1-D X Mark III zeigt Canon, was derzeit bei Video-DSLRs möglich ist: Interne 12 Bit 5.5K RAW Log Aufnahme mit max. 60p (!), 5-Achsen Stabilisierung, internes 4K 10 Bit H.265 Log Recording uvm. Wir haben uns die Canon EOS -1D X Mark III in der Praxis angeschaut - teils mit überraschenden Ergebnissen weiterlesen>>

neuestes Video
 

Aktuelles Video:
Succession Composer Breaks Down the Theme Song | Vanity Fair

Für alle, die sich auch für Musik interessieren, geht es hier um die Entstehung der -- wie wir finden extrem gelungenen -- Musik zur HBO-Serie Succession. Komponist Nicholas Britell führt am Klavier durch die verschiedenen tonalen Layer und reizenden Dissonanzen.