News-Kommentare Forum



Neuronale Netze zur Bildergänzung



Kommentare / Diskussionen zu aktuellen Newsmeldungen auf slashCAM
Antworten
slashCAM
Administrator
Administrator
Beiträge: 11279

Neuronale Netze zur Bildergänzung

Beitrag von slashCAM »

Und schon wieder einmal ein höchst interessantes Paper aus dem Bereich der künstlichen Intelligenz, an dem unter anderem auch das Adobe Research Team beteiligt war. Wer P...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
Neuronale Netze zur Bildergänzung



camworks
Beiträge: 1902

Re: Neuronale Netze zur Bildergänzung

Beitrag von camworks »

Bei PatchMatch sind die Augen besser, die weißen Streifen sind korrekt eingefügt.
ciao, Arndt.



StanleyK2
Beiträge: 1128

Re: Neuronale Netze zur Bildergänzung

Beitrag von StanleyK2 »

Sorry, das sieht leicht bescheiden aus. Nicht ohne Grund (?) hat man das vollständige Original weggelassen. Und wie (d) sieht keine Raubkatze aus, jedenfalls keine, die ich (im Zoo oder Film) gesehen habe ... (und täglich grüßt das NN Murmeltier)



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Das Problem bei solchen Verdeckungsmethoden ist weniger, wie gut es Verdeckt wird, als vielmehr das Weglassen der Realität, denn wenn der Leopard unter dem Weißen Fleck das Einschussloch hat, das ihn getötet hat, wird die Bildaussahe völlig verkehrt und das Foto oder der Film erfüllt nicht mehr den eigentlichen Ansatz.

All diese Methoden sind nämlich nur so gut, wie die optische Wiedergabe und können diese nicht ersetzen. Es entstehen wohl messerscharfe Bilder, aber mit jedem Patch eine zunehmende Entfernung zur Realität.
Interessant wäre wirklich einmal, das Originalbild gewesen und hätte das eigentliche Problem verdeutlichen können.

Aber es geht ja offenbar gar nicht um die Rekonstruktion von realen Wirklichkeiten, also dem eigentlichen Sinn der Fotografie, sondern darum, einer neuen Bildästetik zu dienen, bei der die reale Szene nur noch eine nachgeordnete Rolle spielt.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



StanleyK2
Beiträge: 1128

Re: Neuronale Netze zur Bildergänzung

Beitrag von StanleyK2 »

Neue Ästhetik? Im vorliegenden Beispiel wohl kaum. Das ist einfach nur Käse und ist weder ästhetisch noch realistisch. Die Nasenpartie fehlt völlig, und die ist für ein (Groß)Katzengesicht essentiell:



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Das war auch weniger auf diese Flickschusterei gemünzt, als vielmehr auf die Super Resolution Aufbereitung, denn auch da ist das, was das Objektiv nicht aufzeichnet, einfach nur mit Patches übertüncht und keine Wiedergabe der Realität mehr.
Die Google Algorithmen zaubern an Strände sogar Menschen, die man in der Vergrösserung dann erahnen kann, obwohl in der Aufnahmeszene gar keine Menschen an dem Strand waren.
Es wird dann eine Frage, was von wem in solche Patch Bibliotheken eingepflegt wird, aber mit Fotografie hat das dann nur noch begrenzt zu tun.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



legolax
Beiträge: 15

Re: Neuronale Netze zur Bildergänzung

Beitrag von legolax »

StanleyK2 hat geschrieben:Sorry, das sieht leicht bescheiden aus. Nicht ohne Grund (?) hat man das vollständige Original weggelassen. Und wie (d) sieht keine Raubkatze aus, jedenfalls keine, die ich (im Zoo oder Film) gesehen habe ... (und täglich grüßt das NN Murmeltier)
Aber das Ziel des Algorithmus ist es doch nur, besser als bisherige andere Verfahren fehlende Teile eines Bildes (z.B. weil diese entfernt wurden in der Postproduktion) durch etwas möglichst passendes zu ersetzen, das sagt der Autor doch deutlich: "Aber gerade wenn es in Zukunft darum geht, störende Objekte aus einem (Bewegt-)Bild zu entfernen, dürften Neuronale Netze mit Sicherheit bald die Hauptrolle spielen."

Je näher das Ergebnis an der Realität ist, um so besser - aber der Algorithmus muss doch nur die weißen Flecken im bild möglichst so zu füllen, dass es möglichst nicht auffällt - und das kann er anscheinend besser als bisherige Verfahren - aber natürlich nicht so gut als wenn ein Mensch (allerdings deutlich aufwändiger) das Bild per Hand retuschiert - und grade bei Videos ist das händische korrigieren aufgrund der Vielzahl der Bilder doch keine Alternative - da braucht´s das beste algorithmische (automatisierte) Rechen-Verfahren, um die Aufgabe zu lösen.

Lego



Rudolf Max
Beiträge: 852

Re: Neuronale Netze zur Bildergänzung

Beitrag von Rudolf Max »

Die Idee an sich ist ja sicher nicht schlecht...

Mag ja für ein Stück blauen Himmel oder solche Sachen sehr hilfreich sein, aber für so komplexe Sachen wie ein grosses Katzengesicht ist es völlig unbrauchbar...

Ich warte mal solange, bis man mit dieser pseudo künstlichen Intelligenz ganze Filme automatisch drehen kann, dann muss ich nicht extra noch selber etwas drehen...

Im Moment ist es mehr künstlich als intelligent...



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

legolax hat geschrieben:
StanleyK2 hat geschrieben:Sorry, das sieht leicht bescheiden aus. Nicht ohne Grund (?) hat man das vollständige Original weggelassen. Und wie (d) sieht keine Raubkatze aus, jedenfalls keine, die ich (im Zoo oder Film) gesehen habe ... (und täglich grüßt das NN Murmeltier)
Aber das Ziel des Algorithmus ist es doch nur, besser als bisherige andere Verfahren fehlende Teile eines Bildes (z.B. weil diese entfernt wurden in der Postproduktion) durch etwas möglichst passendes zu ersetzen, das sagt der Autor doch deutlich: "Aber gerade wenn es in Zukunft darum geht, störende Objekte aus einem (Bewegt-)Bild zu entfernen, dürften Neuronale Netze mit Sicherheit bald die Hauptrolle spielen."

Je näher das Ergebnis an der Realität ist, um so besser - aber der Algorithmus muss doch nur die weißen Flecken im bild möglichst so zu füllen, dass es möglichst nicht auffällt - und das kann er anscheinend besser als bisherige Verfahren - aber natürlich nicht so gut als wenn ein Mensch (allerdings deutlich aufwändiger) das Bild per Hand retuschiert - und grade bei Videos ist das händische korrigieren aufgrund der Vielzahl der Bilder doch keine Alternative - da braucht´s das beste algorithmische (automatisierte) Rechen-Verfahren, um die Aufgabe zu lösen.

Lego
Leider ist das nicht die einzige Anwendung .... Solche Algorithmen werkeln auch heute schon in den meisten 4K Handys und rechnen die Bilder.
Hauptsache scharf und Inhalt reicht so ungefähr.

Insofern hat man das leider nicht mehr in der Hand, welche Stellen. des Bildes gepatched werden, weil es dann auch ausreicht, nur noch mit geringer Auflösung abzutasten.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jott
Beiträge: 22963

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jott »

Tolle Handys, die 30x pro Sekunde neuronalnetzgespeiste Fakebilder hinkriegen, ohne dass man's sieht. Du kannst deine Story sicher belegen, nicht wahr?



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Klar, nur dazu gehört aber auch jemand, der es versteht.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jott
Beiträge: 22963

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jott »

Billige Ausflucht mit üblicher Beleidigung. wowu pur. Gilt aber nicht: Links bitte! Mach mal. Oder ist die Story alleine auf deinem Mist gewachsen? So wie die angebliche Super Resolution 4K-Aufnahmen von hinten bis vorne scharf rechnet? Schon das ist einfach zu widerlegen, man muss dazu nur eine anschalten, was du wohl noch nie getan hast. Jetzt also neuronale Netze beim Handyfilmen. Komm, beleg mal.



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Ja ja, alles klar, leg Dich wieder hin.

Aber ich hab´hier was auf Deinem Level gefunden.

Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jommnn
Beiträge: 300

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jommnn »

Aber ich dachte, Magic Pony macht da im Moment noch eher Forschungsarbeit, und dann auch eher für die Nachbereitung, deren Technologie wird tatsächlich aktuell in Handys verbaut?



WoWu
Beiträge: 14819

Re: Neuronale Netze zur Bildergänzung

Beitrag von WoWu »

Probier es aus, denn wenn Du 4K auflöst, müsstest Du einen Gegenstand von 2x2 cm im Abstamd von rd 100 m gefilmt, in der 4K Wiedergabe noch als einzelnes Objekt erkennen.
Übrigens wird an dem Thema schon seit den 70er Jahren geforscht und im Bildzusammemhang rd. 10 Jahre.
Und im Gamingbereich sind Echtzeitapplikationen mittlerweile ein alter Hut und mit z.Tl. deutlich höheren Auflösungen.
Aber das ist ja ein allgemeines Entwicklungsthema, an dem alle möglichen Firmen, jeweils in ihren Bereichen arbeiten.
Gute Grüße, Wolfgang

E-Book:
www.provideome.de



Jommnn
Beiträge: 300

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jommnn »

Meine Frage bezog sich eher auf Magic Pony, weißt du, ob deren Technologie schon konkret verbaut wird?



Jott
Beiträge: 22963

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jott »

In Kameras? Anwendung neuronaler Netze zur Bildverbesserung in realtime, ohne jede Verzögerung? wowu weiß das ganz sicher, aber er will halt nicht verraten, welche Handies oder Kameras das können sollen. Und vor allem wie. Eine Frage des Niveaus?
WoWu hat geschrieben:Solche Algorithmen werkeln auch heute schon in den meisten 4K Handys



Jommnn
Beiträge: 300

Re: Neuronale Netze zur Bildergänzung

Beitrag von Jommnn »

Jott hat geschrieben:In Kameras? Anwendung neuronaler Netze zur Bildverbesserung in realtime, ohne jede Verzögerung? wowu weiß das ganz sicher, aber er will halt nicht verraten, welche Handies oder Kameras das können sollen. Und vor allem wie. Eine Frage des Niveaus?
WoWu hat geschrieben:Solche Algorithmen werkeln auch heute schon in den meisten 4K Handys
Ja eben, das hat mich jetzt verwirrt, Magic Pony in Zusammenhang mit Hardware zu lesen, dann war Wowus Link einfach irreführend.



 Aktuelle Beiträge [alle Foren]
 
» Adobe Firefly generiert jetzt auch KI-Soundtracks und Voice-Over
von ruessel - Fr 9:29
» Morgen ist heute gestern | Kurzfilm 2025
von Merlin films - Do 20:57
» DJI Neo 2 bringt Rundum-Hinderniserkennung samt LiDAR
von slashCAM - Do 17:42
» Neue Firmware für Sony Alpha 1 II und Sony Alpha 9 III bringt neue Funktionen
von slashCAM - Do 13:33
» 110-Ohm-Mikrofonkabel Wasserdicht bis 20 m
von Blackbox - Do 3:55
» KI: Bessere Sprachverständlichkeit
von freezer - Mi 22:24
» Dumpfe Audiospur als ob sie im Auto laufen würde
von toniwan - Mi 20:10
» Forscher suchen die maximale Pixelauflösung der Augen
von Darth Schneider - Mi 19:17
» Bitte um Rat nach langer, aber verwirrender Recherche
von Jott - Mi 11:47
» SCHLECHTE Regisseure? Mit Wilson Gonzalez Ochsenknecht
von Nigma1313 - Mi 10:42
» Canon EOS R6 Mark III Neuvorstellung am 06.11.25
von cantsin - Di 22:00
» slashCam im Gespräch mit Nikon zur neuen ZR und der Zukunft von RED Komodo
von iasi - Di 18:53
» DJI im neuen Gewand: Xtra
von medienonkel - Di 17:13
» Neues Firmware Update 3.0 für die Nikon Zf Kamera
von Funless - Di 14:46
» Insta360 X4 Air vorgestellt - 8K/360° Action-Kamera für 329 Euro
von slashCAM - Di 13:15
» OpenAI Sora 2 - Nutzungsrichtlinie entfacht internationalen Urheberrechtsstreit
von philr - Di 10:47
» DJI Neo 2 kommt am 30. Oktober mit LiDAR und größerem Sensor
von medienonkel - Di 9:50
» Canons restriktive Mount-Politik: Clever oder der Impuls für eine chinesische DSLM?
von env0 - Mo 17:53
» Lernen von ALFRED HITCHCOCK - Wie entstand Psycho?
von stip - Mo 17:03
» Mein VTube-kanal-Projekt auf YouTube,...
von walang_sinuman - Mo 7:17
» LG UltraFine 40U990A-W - 40" 5K2K Monitor mit Thunderbolt 5
von chackl - So 19:24
» Leica M EV1: Leica M mit elektronischem Sucher zu einem niedrigeren Preis vorgestellt
von rkunstmann - So 19:12
» Neue Firmware für Panasonic LUMIX S5 II, S5 IIX, S9, GH7 und G9 II
von Darth Schneider - So 13:32
» Sound Matters - Podcast zum Thema Production Sound
von pillepalle - So 8:13
» Einblicke in die VFX-Arbeit von Todd Vaziri bei ILM / Star Wars u.ä.
von slashCAM - Sa 16:39
» Konkurrenz für IMAX - Neues HDR-Premiumkinoformat Vue Epic für Europa
von Jott - Sa 13:45
» Neues Musikvideo Team Drama „Baby“
von Bildlauf - Sa 11:10
» Lokale KI ist jetzt WIRKLICH brauchbar
von ruessel - Sa 10:53
» Windows 11 und Adobe CS6
von Herbie - Fr 20:14
» Apple Final Cut Pro und Adobe Premiere - jetzt mit nativem Nikon RED RAW NE Support
von slashCAM - Fr 12:42
» Neue FUJIFILM X-T30 III filmt in 6K
von Funless - Do 18:32
» Panasonic LUMIX Lab und Flow Apps bekommen neue Funktionen
von arcon30 - Do 9:09
» !!BIETE!! Sony FX6
von klusterdegenerierung - Mi 21:42
» Predator: Killer of Killers
von 7River - Mi 20:10
» Abhörmonitore
von Pianist - Mi 18:17