slashCAM
Administrator
Administrator
Beiträge: 11262

TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von slashCAM » So 06 Sep, 2020 11:48


Eigentlich entspricht es ja dem gesunder Menschenverstand, daß fehlende Detailinformationen bei unscharfen Bildern nicht im Nachhinein ergänzt werden können. Es werden ab...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer




egmontbadini
Beiträge: 74

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von egmontbadini » Mo 07 Sep, 2020 11:42

Es ist interessant wie kompakt man das hinbekommt - ist ein großer Rechner dafür nötig oder bekommt man da auch in einer Kamera unter? Kann man den Algorithmus schon nutzen?
woher soll ich wissen was ich denke, bevor ich gehört habe, was ich gesagt habe?




pixler
Beiträge: 558

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von pixler » Mo 07 Sep, 2020 13:37

Das erste verlinkte YouTube Beispiel verwendet Material des Blender Projektfilmes "Tears of Steel" - http://tearsofsteel.org Dieser wurde 2012 in 4K gerendert und kann auch in dieser Auflösung runtergeladen werden.

Hier könnte das Resultat auch einfach gefakt sein.




prime
Beiträge: 1299

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von prime » Mo 07 Sep, 2020 14:56

Eher unwahrscheinlich das es gefaked ist, da man den ganzen Code und die (bereits trainierten) Modelle und das verwendete Material runterladen und es verifizieren kann.




cantsin
Beiträge: 10975

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von cantsin » Mo 07 Sep, 2020 14:58

Zumal das Video (und der Algorithmus) von der TU München stammt. Das wäre dann ein Jahrhundert-Wissenschaftsskandal.




tom
Administrator
Administrator
Beiträge: 1394

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von tom » Mo 07 Sep, 2020 15:33

egmontbadini hat geschrieben:
Mo 07 Sep, 2020 11:42
Es ist interessant wie kompakt man das hinbekommt - ist ein großer Rechner dafür nötig oder bekommt man da auch in einer Kamera unter? Kann man den Algorithmus schon nutzen?
Das Projekt hat eine handelsübliche Nvidia GeForce GTX 1080Ti GPU mit 11 GB RAM genutzt, auf spezialisierter Hardware geht das wahrscheinlich auch kleiner.

Man kann den Algorithmus schon jetzt selbst ausprobieren, der Code dazu ist hier zu finden:
http://github.com/thunil/TecoGAN
slashCAM




Drushba
Beiträge: 2255

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von Drushba » Mo 07 Sep, 2020 15:52

Ich bräuchte sowas mal zur Audio-Rettung. Warte eigentlich die ganze Zeit auf eine Software, die Stimmen aus bekannten Mustern interpoliert, wenn sich z.B. der Protagonist vom Mikro wegdreht und klingt als würde er in einen Eimer Wasser sprechen oder durch plötzliche Umgebungsgeräusche (z.B. Motorradknattern) kaum mehr wahrnehmbar ist. Könnte man da nicht eine ähnliche Technik entwickeln? Oder gibts das schon?
Lieber glaub ich Wissenschaftlern, die sich mal irren, als Irren, die glauben, sie seien Wissenschaftler.




cantsin
Beiträge: 10975

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von cantsin » Mo 07 Sep, 2020 16:20

Hab' mal probiert, TecoGAN auf meinem Linux-System mit GTX1080Ti zu installieren, was dank der Integration von Github, Python 3/Pip ins System und der zahlreichen Linux-typischen/unixoiden Abhängigkeiten und Installationsroutinen von TecoGAN eigentlich gut gehen sollte. (Wahrscheinlich wurde die Software unter Linux entwickelt.)

Letztlich scheiterte das Unterfangen aber an einem zu alten Nvidia-Treiber in meinem Debian 10-System.

Die Installation der Software ist in jedem Fall nicht trivial, da sie sich aus dutzenden externen Modulen mit jeweils eigenen Abhängigkeiten zusammensetzt.




mash_gh4
Beiträge: 4716

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von mash_gh4 » Mo 07 Sep, 2020 17:18

solche sachen macht gewöhnlich innerhalb von nvidia-docker umgebungen. da kann man sich die betreffenden abhängigkeiten dann recht sauber zusammenstellen, ohne sich das arbeitssystem völlig zuzumüllen od. versehentlich zu ruinieren. oft bekommt auch gleich ein fertig ausführbares docker-image des gesamten setups, dass auf allen systemen läuft. eine solche herangehensweise ist bei größeren ML-projekten mittlerweile ohnehin usus bzw. in der praxis fast unverzichtbar.




cantsin
Beiträge: 10975

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von cantsin » Mo 07 Sep, 2020 18:51

mash_gh4 hat geschrieben:
Mo 07 Sep, 2020 17:18
solche sachen macht gewöhnlich innerhalb von nvidia-docker umgebungen. da kann man sich die betreffenden abhängigkeiten dann recht sauber zusammenstellen, ohne sich das arbeitssystem völlig zuzumüllen od. versehentlich zu ruinieren.
Das dürfte aber in meinem Fall (bzw. in dem von Debian 10) immer noch nicht das Problem der Nvidia-Treiberkompatibilität lösen, oder täusche ich mich da?




mash_gh4
Beiträge: 4716

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von mash_gh4 » Mo 07 Sep, 2020 19:49

cantsin hat geschrieben:
Mo 07 Sep, 2020 18:51
Das dürfte aber in meinem Fall (bzw. in dem von Debian 10) immer noch nicht das Problem der Nvidia-Treiberkompatibilität lösen, oder täusche ich mich da?
doch bis zu einem gewissen grad schon! -- d.h. du kannst verschiedene cuda-versionen in den containern nutzen, die man nebeneienader nicht am hostsystem installieren könnte.

genau dieses problem war ja ursprünglich der grund, warum das zeug entwickelt wurde. ein einfaches durchreichen der entsprechenden nvidia treiber-interfaces im /dev-verzeichnis war hier keine lösung, da es sofort zu abstürzen führt, wenn die versionen im container nicht mir denen am host system übereinstimmen. dieses relativ komplizierte ummapen der nötigen treiber bzw. libraries übernimmt eben nvidia-docker.

der debian support [ganz speziell im fall von debian "testing"] lässt zwar oft ein wenig zu wünschen über (siehe bspw. #854), aber im wesentlich bleibt einem ohnehin kaum eine andere option, wenn man sich mit derartigen dingen herumschlagen muss...




KallePeng
Beiträge: 100

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von KallePeng » Mi 09 Sep, 2020 22:52

HiHi, ich bin mal gespannt wann die ersten Leute auf die Idee kommen, mit Hilfe des Algorythmus verpixelte Nummernschilder und Personen wieder kenntlich zu machen
______________________________________________________________________________________________________________________________
Guter Geschmack ist ganz einfach: "Immer nur das Beste!" (Oscar Wilde)




cantsin
Beiträge: 10975

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von cantsin » Mi 09 Sep, 2020 23:43

KallePeng hat geschrieben:
Mi 09 Sep, 2020 22:52
HiHi, ich bin mal gespannt wann die ersten Leute auf die Idee kommen, mit Hilfe des Algorythmus verpixelte Nummernschilder und Personen wieder kenntlich zu machen
Dann kriegst Du aber nur fiktive Nummernschilder und Gesichter, die zwar vielleicht plausibel aussehen, aber nichts mit dem Motiv zu tun haben. Das gab's übrigens schon mal als technisches Problem von Xerox-Kopierern, die auf Fotokopien von Zahlenmaterial falsche Nummern wiedergegeben haben:

https://www.theverge.com/2013/8/6/45944 ... -documents




Christian Schmitt
Beiträge: 492

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von Christian Schmitt » Do 10 Sep, 2020 08:43

Da werden sich Polizei und Staatsanwaltschaft sicher als erstes in die Warteschlange für ein benutzerfreundliches Endprodukt stellen.




Social Media

       
 Aktuelle Beiträge [alle Foren]
 
» TEARDOWN / MODDING / REPAIR etc.
von Darth Schneider - Di 18:20
» Panasonic GH6 Firmware 2.0 bringt 120 fps ProRes RAW mit Ninja V+ und internes DCI 4K ProRes
von roki100 - Di 17:46
» Potato Jet & Michael Bay
von klusterdegenerierung - Di 17:31
» Xiaomi 12S Ultra: Leica-Kamera mit 1" Sensor und 10bit HDR-Aufnahme in Dolby Vision
von iasi - Di 17:23
» Suche eine Schnittsoftware für Mac, die 4k in voller Datenrate von 160 Mbps​ der Mavic 3 ausgeben kann
von Jott - Di 17:14
» DIY: Sigma DP2 Quattro Zubehör
von cantsin - Di 17:14
» DV Minikassetten mit Canopus EZDV Easy auf Festplatte übertragen, wie geht ihr vor?
von Jott - Di 16:57
» Erste Erfahrungen Sony A1
von pillepalle - Di 16:19
» Wie wählt Netflix seine Kameras aus? Ein Blick hinter die Kulissen des Netflix Messlabor
von andieymi - Di 13:10
» Nach dem Trailer zu urteilen, könnte der doch was werden
von Map die Karte - Di 12:55
» Speicherplatzaufteilung bei Studio
von Jasper - Di 12:13
» Super 8 scan verbessern
von MOS - Di 11:24
» Panasonic LUMIX DC-GH5 und Olympus Pro, sehr gepflegt!
von videogo - Di 10:18
» Verkaufe Sigma 30/1.4 für MFT
von 123oliver - Di 7:33
» Suche 3D-Camcorder JVC GY-HMZ 1
von Romius - Mo 22:41
» Was schaust Du gerade?
von roki100 - Mo 21:55
» Inspirierende Bücher und Videos zu Storytelling und Editing?
von berlin123 - Mo 21:23
» Red stellt V-Raptor XL in Vitrine aus
von iasi - Mo 19:31
» FilmLight: Awards für Color Grading
von rkunstmann - Mo 18:53
» Erste Beta Firmware OS5 bringt neue Funktionen für alle SmallHD Monitore
von slashCAM - Mo 18:36
» »Call to Europe« 470 bis 694 MHz sind in Gefahr!
von ruessel - Mo 17:09
» Marina Amaral: Künstlerin koloriert weltbekannte Schwarz-Weiß-Fotos
von ruessel - Mo 16:20
» Umfrage: Wenn Geld keine Rolle spielt - welche DSLM?
von slashCAM - Mo 14:54
» BIETE: Metabones Speed Booster an für Canon EF auf MFT / M43 für Blackmagic, Lumix GH3, 4, 5, 6, etc,)
von Adrian1232000 - Mo 10:11
» Sony FE PZ 16–35 mm F4 G Zoom an der FX3: Traumkombo für Gimbalsetups / DJI RS2?
von godehart - Mo 10:03
» Why did ARRI ABANDON their first digital camera? | ARRIflex D-20/D-21
von andieymi - Mo 9:43
» Hilfe! Streifen im Bild (kein Flicker)
von prime - Mo 9:02
» Blackmagic Video Assist 3.7 Update bringt Unterstützung für Fujifilm X-H2s und Verbesserungen für Panasonic Kameras
von roki100 - So 23:16
» >Der LED Licht Thread<
von klusterdegenerierung - So 20:16
» Fundament(al) erneuert - 4K-Testrechner mit AMD Ryzen 5 5600X
von tommy823 - So 20:07
» Was hörst Du gerade?
von roki100 - So 19:15
» Linsen (Vintage, Anamorphic & Co.)
von roki100 - So 19:07
» Suche Erfahrung mit Slypod Pro
von klusterdegenerierung - So 18:44
» Rode NTH-100: Professioneller Over-Ear Kopfhörer im Praxistest - inkl. Sennheiser HD 25 Vergleich
von pillepalle - So 18:39
» Sony A7S III erste Erfahrungen, Bugs, Problemlösungen,...
von Axel - So 16:29
 
neuester Artikel
 
Rode NTH-100: Professioneller Over-Ear Kopfhörer im Praxiste

Mit dem Rode NTH-100 hat Rode seinen ersten professionellen Over-Ear Kopfhörer für Musikproduktion, Mixing / Audio Editing über Podcasting und Streaming bis hin zu Location Recording / Monitoring vorgestellt. Wir haben uns den neuen Content Creation Kopfhörer von Rode angehört und ihn mit dem Sennheiser HD 25 verglichen ... weiterlesen>>

Dynamic Showdown - R5C, Z9 und S1H

Mit dem Auftritt von TicoRAW in der Firmware 2.0 von Nikons Z9 hat sich die Kamera in unserer Dynamik-Einschätzung für Videofilmer wieder weit nach oben bewegt. Doch wie nah kommt sie unserem aktuellen Dynamik-Liebling Panasonic S1H? weiterlesen>>