slashCAM
Administrator
Administrator
Beiträge: 11279

TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von slashCAM »


Eigentlich entspricht es ja dem gesunder Menschenverstand, daß fehlende Detailinformationen bei unscharfen Bildern nicht im Nachhinein ergänzt werden können. Es werden ab...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer



egmontbadini
Beiträge: 94

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von egmontbadini »

Es ist interessant wie kompakt man das hinbekommt - ist ein großer Rechner dafür nötig oder bekommt man da auch in einer Kamera unter? Kann man den Algorithmus schon nutzen?
woher soll ich wissen was ich denke, bevor ich gehört habe, was ich gesagt habe?



pixler
Beiträge: 575

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von pixler »

Das erste verlinkte YouTube Beispiel verwendet Material des Blender Projektfilmes "Tears of Steel" - http://tearsofsteel.org Dieser wurde 2012 in 4K gerendert und kann auch in dieser Auflösung runtergeladen werden.

Hier könnte das Resultat auch einfach gefakt sein.



prime
Beiträge: 1550

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von prime »

Eher unwahrscheinlich das es gefaked ist, da man den ganzen Code und die (bereits trainierten) Modelle und das verwendete Material runterladen und es verifizieren kann.



cantsin
Beiträge: 16295

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von cantsin »

Zumal das Video (und der Algorithmus) von der TU München stammt. Das wäre dann ein Jahrhundert-Wissenschaftsskandal.
"Wieso eigentlich überhaupt was drehen? Warum nicht jahrelang nur darüber philosophieren?" -stip



tom
Administrator
Administrator
Beiträge: 1518

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von tom »

egmontbadini hat geschrieben: Mo 07 Sep, 2020 11:42 Es ist interessant wie kompakt man das hinbekommt - ist ein großer Rechner dafür nötig oder bekommt man da auch in einer Kamera unter? Kann man den Algorithmus schon nutzen?
Das Projekt hat eine handelsübliche Nvidia GeForce GTX 1080Ti GPU mit 11 GB RAM genutzt, auf spezialisierter Hardware geht das wahrscheinlich auch kleiner.

Man kann den Algorithmus schon jetzt selbst ausprobieren, der Code dazu ist hier zu finden:
http://github.com/thunil/TecoGAN
slashCAM



Drushba
Beiträge: 2560

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von Drushba »

Ich bräuchte sowas mal zur Audio-Rettung. Warte eigentlich die ganze Zeit auf eine Software, die Stimmen aus bekannten Mustern interpoliert, wenn sich z.B. der Protagonist vom Mikro wegdreht und klingt als würde er in einen Eimer Wasser sprechen oder durch plötzliche Umgebungsgeräusche (z.B. Motorradknattern) kaum mehr wahrnehmbar ist. Könnte man da nicht eine ähnliche Technik entwickeln? Oder gibts das schon?



cantsin
Beiträge: 16295

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von cantsin »

Hab' mal probiert, TecoGAN auf meinem Linux-System mit GTX1080Ti zu installieren, was dank der Integration von Github, Python 3/Pip ins System und der zahlreichen Linux-typischen/unixoiden Abhängigkeiten und Installationsroutinen von TecoGAN eigentlich gut gehen sollte. (Wahrscheinlich wurde die Software unter Linux entwickelt.)

Letztlich scheiterte das Unterfangen aber an einem zu alten Nvidia-Treiber in meinem Debian 10-System.

Die Installation der Software ist in jedem Fall nicht trivial, da sie sich aus dutzenden externen Modulen mit jeweils eigenen Abhängigkeiten zusammensetzt.
"Wieso eigentlich überhaupt was drehen? Warum nicht jahrelang nur darüber philosophieren?" -stip



mash_gh4
Beiträge: 4716

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von mash_gh4 »

solche sachen macht gewöhnlich innerhalb von nvidia-docker umgebungen. da kann man sich die betreffenden abhängigkeiten dann recht sauber zusammenstellen, ohne sich das arbeitssystem völlig zuzumüllen od. versehentlich zu ruinieren. oft bekommt auch gleich ein fertig ausführbares docker-image des gesamten setups, dass auf allen systemen läuft. eine solche herangehensweise ist bei größeren ML-projekten mittlerweile ohnehin usus bzw. in der praxis fast unverzichtbar.



cantsin
Beiträge: 16295

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von cantsin »

mash_gh4 hat geschrieben: Mo 07 Sep, 2020 17:18 solche sachen macht gewöhnlich innerhalb von nvidia-docker umgebungen. da kann man sich die betreffenden abhängigkeiten dann recht sauber zusammenstellen, ohne sich das arbeitssystem völlig zuzumüllen od. versehentlich zu ruinieren.
Das dürfte aber in meinem Fall (bzw. in dem von Debian 10) immer noch nicht das Problem der Nvidia-Treiberkompatibilität lösen, oder täusche ich mich da?
"Wieso eigentlich überhaupt was drehen? Warum nicht jahrelang nur darüber philosophieren?" -stip



mash_gh4
Beiträge: 4716

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von mash_gh4 »

cantsin hat geschrieben: Mo 07 Sep, 2020 18:51 Das dürfte aber in meinem Fall (bzw. in dem von Debian 10) immer noch nicht das Problem der Nvidia-Treiberkompatibilität lösen, oder täusche ich mich da?
doch bis zu einem gewissen grad schon! -- d.h. du kannst verschiedene cuda-versionen in den containern nutzen, die man nebeneienader nicht am hostsystem installieren könnte.

genau dieses problem war ja ursprünglich der grund, warum das zeug entwickelt wurde. ein einfaches durchreichen der entsprechenden nvidia treiber-interfaces im /dev-verzeichnis war hier keine lösung, da es sofort zu abstürzen führt, wenn die versionen im container nicht mir denen am host system übereinstimmen. dieses relativ komplizierte ummapen der nötigen treiber bzw. libraries übernimmt eben nvidia-docker.

der debian support [ganz speziell im fall von debian "testing"] lässt zwar oft ein wenig zu wünschen über (siehe bspw. #854), aber im wesentlich bleibt einem ohnehin kaum eine andere option, wenn man sich mit derartigen dingen herumschlagen muss...



KallePeng
Beiträge: 100

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von KallePeng »

HiHi, ich bin mal gespannt wann die ersten Leute auf die Idee kommen, mit Hilfe des Algorythmus verpixelte Nummernschilder und Personen wieder kenntlich zu machen
______________________________________________________________________________________________________________________________
Guter Geschmack ist ganz einfach: "Immer nur das Beste!" (Oscar Wilde)



cantsin
Beiträge: 16295

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von cantsin »

KallePeng hat geschrieben: Mi 09 Sep, 2020 22:52 HiHi, ich bin mal gespannt wann die ersten Leute auf die Idee kommen, mit Hilfe des Algorythmus verpixelte Nummernschilder und Personen wieder kenntlich zu machen
Dann kriegst Du aber nur fiktive Nummernschilder und Gesichter, die zwar vielleicht plausibel aussehen, aber nichts mit dem Motiv zu tun haben. Das gab's übrigens schon mal als technisches Problem von Xerox-Kopierern, die auf Fotokopien von Zahlenmaterial falsche Nummern wiedergegeben haben:

https://www.theverge.com/2013/8/6/45944 ... -documents
"Wieso eigentlich überhaupt was drehen? Warum nicht jahrelang nur darüber philosophieren?" -stip



Christian Schmitt
Beiträge: 508

Re: TecoGAN: Neuer KI Super-Resolution Algorithmus macht Videos 4x schärfer

Beitrag von Christian Schmitt »

Da werden sich Polizei und Staatsanwaltschaft sicher als erstes in die Warteschlange für ein benutzerfreundliches Endprodukt stellen.



 Aktuelle Beiträge [alle Foren]
 
» DJI Mini 5 Pro kommt in 5 Wochen - mit 50 Min Flugzeit und LiDAR
von patfish - Di 23:13
» Sony RX1R III mit Vollformat und 35mm Fixoptik vorgestellt, filmt in 4K
von Darth Schneider - Di 22:40
» Sony soll eine FX8 mit 12K-Sensor für den Herbst planen
von iasi - Di 22:39
» Was schaust Du gerade?
von roki100 - Di 22:01
» Panasonic S5 - Allgemeine Fragen, Tipps und Tricks, Zeig deine Bilder/Videos usw.
von roki100 - Di 20:41
» Sony ECM-778 - neues XLR-Richtmikrofon mit Hi-Res Audio für Profis
von Darth Schneider - Di 20:14
» RØDE Wireless Micro: Ab sofort auch kabellose iPhone-Aufnahme ohne Empfänger
von Blackbox - Di 17:46
» Nanlite pico - neues, kompaktes Vollfarben-LED-Panel für die mobile Videoproduktion
von Darth Schneider - Di 16:23
» Motor Smart: Intelligenter AutoFocus-Motor von PDMovie nutzt LiDAR und KI
von Darth Schneider - Di 16:20
» Zoom M3 Mictrak Erfahrungen?
von Jörg - Di 15:46
» Social Media, KI & Co. - Neue Gefährdungslagen für die Meinungsvielfalt
von Blackbox - Di 15:46
» Zittern mit 50fps Clip in 25fps Timeline
von blueplanet - Di 13:14
» "32 Bit float" Recording - Ist das wirklich besser?
von ksingle - Di 12:37
» Konkurrenz für IMAX - Neues HDR-Premiumkinoformat Vue Epic für Europa
von dienstag_01 - Di 10:17
» Neue Dummy-Adapter von SWIT für NP-F-, LP-E6- und NP-FZ100-Akkus
von Blackbox - Di 2:37
» LensNode Plug-In
von j.t.jefferson - Mo 22:36
» 15.000 Euro - welche Kamera
von pillepalle - Mo 21:04
» Kamera- & Objektivangebote: Bis zu 1.000€ Rabatt bei Nikon, Canon & Co
von slashCAM - Mo 16:12
» DaVinci Resolve 20 Workshop - AI Depth Map unkompliziert für Titel-Effekte nutzen
von CameraRick - Mo 13:16
» Tarifvertrag zum Einsatz von KI
von ruessel - Mo 10:20
» DJIs Mic 3 Funkmikro kommt bald zusammen mit der Osmo 360 Kamera
von Darth Schneider - So 17:04
» 4.000 Komparsen für "Tribute von Panem" gesucht
von philr - So 11:14
» Gurkenauslöser
von Jott - Sa 21:55
» Was hörst Du gerade?
von Darth Schneider - Sa 19:08
» Blackmagic Updates für Cloud Store, Video Assist und BRAW
von Rick SSon - Sa 13:34
» Panasonic LUMIX S1II und S1IIE für Videofilmer - bis zu 15 Blendenstufen und ARRI Log
von Darth Schneider - Fr 15:20
» Amazon Prime Day - ausgewählte Schnäppchen für Video, Foto & Co.
von GaToR-BN - Fr 12:57
» Nextorage cf-express Type a Erfahrung
von MuffinOne - Mi 23:26
» Wie Hitchcock mit Psycho nicht nur den Horror, sondern den Kinobesuch veränderte
von 7River - Mi 20:10
» Nikon Z6 III - Sensor-Bildqualität, Rolling Shutter, Dynamik - Günstige Z8 für Filmer?
von blueplanet - Mi 14:10
» GoPro MAX 2 gesichtet und DJI Osmo 360 komplett geleakt
von Clemens Schiesko - Mi 14:08
» Kamera, Objektive, Drohnen, Zubehör: Bis zu 50% Rabatt bei Sony, DJI & Co.
von slashCAM - Mi 13:48
» Neue, mehrschichtige Bildsensoren könnten 3-fache Lichtausbeute und Auflösung ermöglichen
von moowy_mäkka - Mi 13:08
» Atomos stellt Studiosonic Headphones vor - nur ein weiteres Rebranding?
von rush - Mi 7:36
» Aufbereitung von altem Filmmaterial Super 8 / Hight 8
von cantsin - Mi 7:23