News-Kommentare Forum



Neuronale Netze zur Bildergänzung



Kommentare / Diskussionen zu aktuellen Newsmeldungen auf slashCAM
Antworten
slashCAM
Administrator
Administrator
Beiträge: 11279

Neuronale Netze zur Bildergänzung

Beitrag von slashCAM »

Und schon wieder einmal ein höchst interessantes Paper aus dem Bereich der künstlichen Intelligenz, an dem unter anderem auch das Adobe Research Team beteiligt war. Wer P...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
Neuronale Netze zur Bildergänzung



camworks
Beiträge: 1902

Re: Neuronale Netze zur Bildergänzung

Beitrag von camworks »

Bei PatchMatch sind die Augen besser, die weißen Streifen sind korrekt eingefügt.
ciao, Arndt.



StanleyK2
Beiträge: 1126

Re: Neuronale Netze zur Bildergänzung

Beitrag von StanleyK2 »

Sorry, das sieht leicht bescheiden aus. Nicht ohne Grund (?) hat man das vollständige Original weggelassen. Und wie (d) sieht keine Raubkatze aus, jedenfalls keine, die ich (im Zoo oder Film) gesehen habe ... (und täglich grüßt das NN Murmeltier)



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Das Problem bei solchen Verdeckungsmethoden ist weniger, wie gut es Verdeckt wird, als vielmehr das Weglassen der Realität, denn wenn der Leopard unter dem Weißen Fleck das Einschussloch hat, das ihn getötet hat, wird die Bildaussahe völlig verkehrt und das Foto oder der Film erfüllt nicht mehr den eigentlichen Ansatz.

All diese Methoden sind nämlich nur so gut, wie die optische Wiedergabe und können diese nicht ersetzen. Es entstehen wohl messerscharfe Bilder, aber mit jedem Patch eine zunehmende Entfernung zur Realität.
Interessant wäre wirklich einmal, das Originalbild gewesen und hätte das eigentliche Problem verdeutlichen können.

Aber es geht ja offenbar gar nicht um die Rekonstruktion von realen Wirklichkeiten, also dem eigentlichen Sinn der Fotografie, sondern darum, einer neuen Bildästetik zu dienen, bei der die reale Szene nur noch eine nachgeordnete Rolle spielt.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



StanleyK2
Beiträge: 1126

Re: Neuronale Netze zur Bildergänzung

Beitrag von StanleyK2 »

Neue Ästhetik? Im vorliegenden Beispiel wohl kaum. Das ist einfach nur Käse und ist weder ästhetisch noch realistisch. Die Nasenpartie fehlt völlig, und die ist für ein (Groß)Katzengesicht essentiell:



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Das war auch weniger auf diese Flickschusterei gemünzt, als vielmehr auf die Super Resolution Aufbereitung, denn auch da ist das, was das Objektiv nicht aufzeichnet, einfach nur mit Patches übertüncht und keine Wiedergabe der Realität mehr.
Die Google Algorithmen zaubern an Strände sogar Menschen, die man in der Vergrösserung dann erahnen kann, obwohl in der Aufnahmeszene gar keine Menschen an dem Strand waren.
Es wird dann eine Frage, was von wem in solche Patch Bibliotheken eingepflegt wird, aber mit Fotografie hat das dann nur noch begrenzt zu tun.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



legolax
Beiträge: 15

Re: Neuronale Netze zur Bildergänzung

Beitrag von legolax »

StanleyK2 hat geschrieben:Sorry, das sieht leicht bescheiden aus. Nicht ohne Grund (?) hat man das vollständige Original weggelassen. Und wie (d) sieht keine Raubkatze aus, jedenfalls keine, die ich (im Zoo oder Film) gesehen habe ... (und täglich grüßt das NN Murmeltier)
Aber das Ziel des Algorithmus ist es doch nur, besser als bisherige andere Verfahren fehlende Teile eines Bildes (z.B. weil diese entfernt wurden in der Postproduktion) durch etwas möglichst passendes zu ersetzen, das sagt der Autor doch deutlich: "Aber gerade wenn es in Zukunft darum geht, störende Objekte aus einem (Bewegt-)Bild zu entfernen, dürften Neuronale Netze mit Sicherheit bald die Hauptrolle spielen."

Je näher das Ergebnis an der Realität ist, um so besser - aber der Algorithmus muss doch nur die weißen Flecken im bild möglichst so zu füllen, dass es möglichst nicht auffällt - und das kann er anscheinend besser als bisherige Verfahren - aber natürlich nicht so gut als wenn ein Mensch (allerdings deutlich aufwändiger) das Bild per Hand retuschiert - und grade bei Videos ist das händische korrigieren aufgrund der Vielzahl der Bilder doch keine Alternative - da braucht´s das beste algorithmische (automatisierte) Rechen-Verfahren, um die Aufgabe zu lösen.

Lego



Rudolf Max
Beiträge: 852

Re: Neuronale Netze zur Bildergänzung

Beitrag von Rudolf Max »

Die Idee an sich ist ja sicher nicht schlecht...

Mag ja für ein Stück blauen Himmel oder solche Sachen sehr hilfreich sein, aber für so komplexe Sachen wie ein grosses Katzengesicht ist es völlig unbrauchbar...

Ich warte mal solange, bis man mit dieser pseudo künstlichen Intelligenz ganze Filme automatisch drehen kann, dann muss ich nicht extra noch selber etwas drehen...

Im Moment ist es mehr künstlich als intelligent...



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

legolax hat geschrieben:
StanleyK2 hat geschrieben:Sorry, das sieht leicht bescheiden aus. Nicht ohne Grund (?) hat man das vollständige Original weggelassen. Und wie (d) sieht keine Raubkatze aus, jedenfalls keine, die ich (im Zoo oder Film) gesehen habe ... (und täglich grüßt das NN Murmeltier)
Aber das Ziel des Algorithmus ist es doch nur, besser als bisherige andere Verfahren fehlende Teile eines Bildes (z.B. weil diese entfernt wurden in der Postproduktion) durch etwas möglichst passendes zu ersetzen, das sagt der Autor doch deutlich: "Aber gerade wenn es in Zukunft darum geht, störende Objekte aus einem (Bewegt-)Bild zu entfernen, dürften Neuronale Netze mit Sicherheit bald die Hauptrolle spielen."

Je näher das Ergebnis an der Realität ist, um so besser - aber der Algorithmus muss doch nur die weißen Flecken im bild möglichst so zu füllen, dass es möglichst nicht auffällt - und das kann er anscheinend besser als bisherige Verfahren - aber natürlich nicht so gut als wenn ein Mensch (allerdings deutlich aufwändiger) das Bild per Hand retuschiert - und grade bei Videos ist das händische korrigieren aufgrund der Vielzahl der Bilder doch keine Alternative - da braucht´s das beste algorithmische (automatisierte) Rechen-Verfahren, um die Aufgabe zu lösen.

Lego
Leider ist das nicht die einzige Anwendung .... Solche Algorithmen werkeln auch heute schon in den meisten 4K Handys und rechnen die Bilder.
Hauptsache scharf und Inhalt reicht so ungefähr.

Insofern hat man das leider nicht mehr in der Hand, welche Stellen. des Bildes gepatched werden, weil es dann auch ausreicht, nur noch mit geringer Auflösung abzutasten.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jott
Beiträge: 22636

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jott »

Tolle Handys, die 30x pro Sekunde neuronalnetzgespeiste Fakebilder hinkriegen, ohne dass man's sieht. Du kannst deine Story sicher belegen, nicht wahr?



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Klar, nur dazu gehört aber auch jemand, der es versteht.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jott
Beiträge: 22636

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jott »

Billige Ausflucht mit üblicher Beleidigung. wowu pur. Gilt aber nicht: Links bitte! Mach mal. Oder ist die Story alleine auf deinem Mist gewachsen? So wie die angebliche Super Resolution 4K-Aufnahmen von hinten bis vorne scharf rechnet? Schon das ist einfach zu widerlegen, man muss dazu nur eine anschalten, was du wohl noch nie getan hast. Jetzt also neuronale Netze beim Handyfilmen. Komm, beleg mal.



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Ja ja, alles klar, leg Dich wieder hin.

Aber ich hab´hier was auf Deinem Level gefunden.

Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jommnn
Beiträge: 300

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jommnn »

Aber ich dachte, Magic Pony macht da im Moment noch eher Forschungsarbeit, und dann auch eher für die Nachbereitung, deren Technologie wird tatsächlich aktuell in Handys verbaut?



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Probier es aus, denn wenn Du 4K auflöst, müsstest Du einen Gegenstand von 2x2 cm im Abstamd von rd 100 m gefilmt, in der 4K Wiedergabe noch als einzelnes Objekt erkennen.
Übrigens wird an dem Thema schon seit den 70er Jahren geforscht und im Bildzusammemhang rd. 10 Jahre.
Und im Gamingbereich sind Echtzeitapplikationen mittlerweile ein alter Hut und mit z.Tl. deutlich höheren Auflösungen.
Aber das ist ja ein allgemeines Entwicklungsthema, an dem alle möglichen Firmen, jeweils in ihren Bereichen arbeiten.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jommnn
Beiträge: 300

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jommnn »

Meine Frage bezog sich eher auf Magic Pony, weißt du, ob deren Technologie schon konkret verbaut wird?



Jott
Beiträge: 22636

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jott »

In Kameras? Anwendung neuronaler Netze zur Bildverbesserung in realtime, ohne jede Verzögerung? wowu weiß das ganz sicher, aber er will halt nicht verraten, welche Handies oder Kameras das können sollen. Und vor allem wie. Eine Frage des Niveaus?
WoWu hat geschrieben:Solche Algorithmen werkeln auch heute schon in den meisten 4K Handys



Jommnn
Beiträge: 300

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jommnn »

Jott hat geschrieben:In Kameras? Anwendung neuronaler Netze zur Bildverbesserung in realtime, ohne jede Verzögerung? wowu weiß das ganz sicher, aber er will halt nicht verraten, welche Handies oder Kameras das können sollen. Und vor allem wie. Eine Frage des Niveaus?
WoWu hat geschrieben:Solche Algorithmen werkeln auch heute schon in den meisten 4K Handys
Ja eben, das hat mich jetzt verwirrt, Magic Pony in Zusammenhang mit Hardware zu lesen, dann war Wowus Link einfach irreführend.



 Aktuelle Beiträge [alle Foren]
 
» GoPro stellt neue 360-Grad-Kamera MAX2, Lifestyle-Kamera LIT HERO und einen KI-Gimbal vor
von j.t.jefferson - Mi 0:58
» Sechs Meter hohe Flamme freistellen?
von Jott - Di 22:31
» Empfehlung Hauptmikros Stereo Chor- / Orchester
von vago - Di 21:22
» DJI Osmo Nano ist da - zweiteilige Mini-Actioncam kostet ab 279 Euro
von iasi - Di 20:55
» 19 Jahre alt und keinen Plan wie ich in die Branche komme
von cantsin - Di 20:45
» Stabileye
von Phil999 - Di 14:30
» Neuer Atomos Ninja TX, Shinobi 7RX + neuer Reference Monitor erklärt
von MarcusG - Di 14:20
» Italien: Mindestens 1 Jahre Gefängnis für Deepfakes ohne Einwilligung
von stip - Di 14:02
» Impressumspflicht -》aktuelle regelungen und lösungen
von soulbrother - Di 13:30
» Blackmagic DaVinci Resolve 20.2.1 bringt Verbesserung fürs Editing und mehr
von slashCAM - Di 11:21
» Atomos Sun Dragon - 5-Farben-HDR-LED-Lichtstreifen mit CRI99 Lichtgüte
von Asjaman - Di 8:59
» Nikon ZR in der Praxis: 6K 50p RED RAW Monster für 2.349,- Euro mit klassenbester Colorscience?
von roki100 - Di 0:54
» !!BIETE!! ZEAPON MICRO 2 Slider 54cm bis 5KG
von klusterdegenerierung - Mo 23:40
» Blackmagic liefert PYXIS 12K aus - Kompakte Cine-Kamera mit 12K Vollformatsensor
von iasi - Mo 23:35
» !!BIETE!! ZEAPON Easylock 2 Tisch Stativ für MICRO 2 Slider
von klusterdegenerierung - Mo 20:23
» !!BIETE!! ZEAPON Motor für MICRO 2 Slider
von klusterdegenerierung - Mo 20:22
» Was schaust Du gerade?
von Darth Schneider - Mo 18:08
» !!BIETE!! TILTA Nucleus Nano I
von klusterdegenerierung - Mo 17:10
» ALEXA 35 Update: ARRICORE für Xtreme & neue Features für alle Modelle
von slashCAM - Mo 15:18
» Was hörst Du gerade?
von Funless - Mo 14:46
» Endlich mal wieder originelle Ansätze im Kino
von iasi - Mo 14:42
» DaVinci Cache auf welche SSD?
von dienstag_01 - Mo 12:57
» DJI MIC 2 - XLR Adapter
von rush - Mo 12:17
» Was tun, wenn das Wasser fehlt? Klimawandelfolgen-Doku Teil 2
von Darth Schneider - Mo 6:37
» Caspar David Friedrich - Filter
von Axel - So 13:39
» iPhone 17 Pro: ProRes RAW, Genlock, Apple Log 2 und Blackmagic ProDock für Filmer
von Axel - So 13:27
» Wiegt die DJI Mini 5 Pro wirklich unter 250 Gramm?
von Jost - So 10:46
» Aputure NOVA II 2x1 - 1.000W LED-Panel mit BLAIR-CG-Engine
von Jominator - So 10:31
» Neue Funktionen für Frame.io verbessern Sicherheit und Sharing
von slashCAM - So 9:33
» Apple Final Cut Camera 2.0 bringt iphone 17 Pro Apple Log 2, Genlock und Open Gate
von vaio - Sa 12:40
» Nikon NRAW als RED RAW prozessieren
von cantsin - Sa 11:48
» Canon Cinema EOS C50 Sensor-Bildqualität - Debayering, Rolling Shutter und Dynamik
von Walter Schulz - Sa 9:40
» Leitz Hektor - sechs Cine-Objektive für DSLM & Co vorgestellt
von philr - Sa 9:25
» Licht how to:
von Darth Schneider - Sa 8:53
» DR Lüftergeräusche + Windgeräusche rausfiltern
von Jott - Sa 8:25