News-Kommentare Forum



Video als Mikrophon: Sound aus Bildern rekonstruieren



Kommentare / Diskussionen zu aktuellen Newsmeldungen auf slashCAM
Antworten
slashCAM
Administrator
Administrator
Beiträge: 11279

Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von slashCAM »

Eine ziemlich phantastisch anmutende Technik hat ein Team von Wissenschaftlern des MIT, Microsofts und Adobe entwickelt, die es ermöglicht, aus reinen Videobildern vor Ort abgespielten Sound zu rekonstruieren
Bild

Hier geht es zur Newsmeldung mit Link und Bildern auf den slashCAM Magazin-Seiten:
Video als Mikrophon: Sound aus Bildern rekonstruieren



ruessel
Beiträge: 10333

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von ruessel »

Ist schon wieder der erste April?

Ich kenne das mit den alten Ton-Vasen der Ägypter, Laserstrahl drauf - Reflexion messen und es kommen 4000 Jahre alte Gesänge wieder zum Vorschein, der Gesang hatte die Finger beim töpfern moduliert.... fake aus den 70er Jahren.
Gruss vom Ruessel



gref
Beiträge: 99

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von gref »

NSA… ick hör' dir trappsen.
"stell dir vor es geht
und keiner kriegt's hin!"
Wolfgang Neuss

***

"Optimismus ist nur
Mangel an Information."
Heiner Müller

***

"Das wird alles von den Medien hochsterilisiert."
Bruno Labbadia



enilnacs
Beiträge: 241

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von enilnacs »

ruessel hat geschrieben:Ist schon wieder der erste April?

Ich kenne das mit den alten Ton-Vasen der Ägypter, Laserstrahl drauf - Reflexion messen und es kommen 4000 Jahre alte Gesänge wieder zum Vorschein, der Gesang hatte die Finger beim töpfern moduliert.... fake aus den 70er Jahren.
Nein, das ist mehr als nur echt. Der Rolling Shutter liefert bei Full HD (je nach Abtastungsart) bis zu 64 KHz Bandbreite bei 60p und 32 KHz bei 30p und IMMER noch 25 KHz bei 24p! (1080 Zeilen mal fps)
:-P Sogar 720p ist bei 24p mit 17 KHz dabei :-D LOL

Was schwieriger sicher ist, wäre das Vibrationsmedium auch im Bild zu haben und über GENUG Pixel. Bei Granit wird das wohl nicht gehen. Muss ja elastisch sein. Und ja, man kann die Pixelfrequenz vom Rauschverhalten wegrechnen. Ah, ja, und der Aufnahmeshutter muss bei min der 2x Aufnahme Frequenz liegen. (25p Shutter muss 1/50 sein min). Je höher desto besser.

Auch wenn man nur ein 8 kHz (Rauschen, Verluste, etc) hinkriegt, reicht das allemal für GSM Sprachqualität.

Film geht nicht, ist Globalshutter, auch alle Globalshutter Digicams. Aber so gut wie alle Smartphonevideos. :-P

;-) Jetzt stelle man sich vor was da auch an alten Videos analysiert werden können. Mein Fresse :-D



lofi
Beiträge: 186

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von lofi »



Habe einfach das Bild eines Orcas bearbeitet
und als Spektrogram benutzt.

http://youtu.be/Hnw_2XQ88eM



raf-dat
Beiträge: 22

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von raf-dat »

Das ist ja mal krank!
Wissenschaftlich genial, aber wofür das dann wahrscheinlich gebraucht wird...

Ich habe das in einem Film schonmal gesehen, ich glaube es war Eagle Eye. Dort hat ein Supercomputer herausgefunden, was in einem schalldichten Raum gesprochen wurde, weil er die Schwingungen einer Kaffeetasse mit einer Überwachungskamera aufzeichnen konnte.

Schon erstaunlich, wie weit wir heute sind.



Attero
Beiträge: 22

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von Attero »

Exakt an diese Filmsequenz musste ich auch denken ;) Schon krass, dass wir dort heute angekommen sind...



Skeptiker
Beiträge: 6721

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von Skeptiker »

raf-dat hat geschrieben:... Ich habe das in einem Film schonmal gesehen ...
Eine Art Vorläufer: HAL 9000 in '2001', der den Text von den Lippen der Astronauten liest, die sich - vermeintlich ungehört - in eine Raumkapsel zurückgezogen haben.



jk86
Beiträge: 186

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von jk86 »

Die Technik ist alles andere als neu.

http://en.wikipedia.org/wiki/Laser_microphone

Neu ist höchstens der Einsatz in einem 2D-Medium.



handiro
Beiträge: 3259

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von handiro »

Richtig, neu ist das nicht. Man könnte denken nach Snowden, wo ja über die Techniken berichtet wurde, wird das ganze jetzt als neue Spielerei auf "lustig" vorgeführt. Ähnlich der Drohnen...

Dann kann sich jeder Bürger als "Spion" verlustieren.....Stasi 3.0 sozusagen.

Allerdings ist die Klangqualität in diesem Beispiel so grottenschlecht, dass man mit den Resultaten nix anfangen kann. Mit highspeed Kamera, Laser oder Mikrowelle siehts schon anders aus.
Good-Cheap-Fast....Pick Any 2



Markus_Krippner
Beiträge: 279

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von Markus_Krippner »

Da stell ich doch glatt meine Beleuchtung daheim auf LED um, in der Hoffnung, daß das Highspeed-Flickern der LEDs eine solche Aufnahme unbrauchbar macht ;-)

...markus :-)
"Alles Vernünftige ist einfach, alles Komplizierte ist überflüssig" (Michail Kalaschnikow)



freacore
Beiträge: 43

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von freacore »

Hoffentlich kann man damit alte Stummfilmaufahmen mit Ton versehen. Das wäre sehr genial.



enilnacs
Beiträge: 241

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von enilnacs »

freacore hat geschrieben:Hoffentlich kann man damit alte Stummfilmaufahmen mit Ton versehen. Das wäre sehr genial.
Wäre toll, leider geht das nicht da man entweder Rolling Shutter oder eine Highspeedcamera braucht. Alles Digitaltechnik.

Bei Film geht das leider nicht, da Global Shutter (auch noch analog).

Aber vielleicht kommt irgendein Genie wieder daher und schafft es anders. Wer weiss. Ich dachte auch dass viele Dinge nicht möglich sind, und wurde dann eines Besseren belehrt. :-P
Jedes mal bin ich fasziniert was man so auf der Siggraph zB zeigt.



Skeptiker
Beiträge: 6721

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Beitrag von Skeptiker »

freacore hat geschrieben:Hoffentlich kann man damit alte Stummfilmaufahmen mit Ton versehen. Das wäre sehr genial.
Kommt darauf an ...
Vielleicht haben die Stummfilmstars sich zu den seriösen Szenen mit passender Mimik ja Dinge zugerufen wie: "Ich bin froh, wenn der Stress hier endlich vorbei ist. Der Regisseur hat offensichtlich einen an der Waffel, und bei der Hitze gibt's eigentlich nur einen Ort, wo man sich wohlfühlt: Das städtische Bad!".



 Aktuelle Beiträge [alle Foren]
 
» Autofokus-Einstellungen Panasonic S5II/IIX/S9
von Bildlauf - Do 20:35
» Canon EOS C50 im Praxistest: Kompaktes Arbeitstier mit 7K 50p Raw - die neue FX3 Konkurrenz
von Bildlauf - Do 20:27
» !!BIETE!! DJI AIR 3 Fly More Combo RC2
von klusterdegenerierung - Do 20:02
» Coca-Cola gibt KI als Kreativität aus und lässt Weihnachts-Werbespot generieren
von medienonkel - Do 17:40
» Linsen (Vintage, Anamorphic & Co.)
von Funless - Do 17:13
» Panasonic S5 - Allgemeine Fragen, Tipps und Tricks, Zeig deine Bilder/Videos usw.
von Bildlauf - Do 16:44
» Nikon ZR Lesertester gesucht! Nikon ZR zu gewinnen
von j.t.jefferson - Do 14:21
» Alien: Romulus - Teaser Trailer online - produziert von Ridley Scott, gedreht auf Alexa 35
von Funless - Do 13:39
» Was schaust Du gerade?
von 7River - Do 13:36
» DJI Neo 2: Kompakte Selfie-/FPV-Drohne mit Rundum-Hinderniserkennung und 4K/100p
von slashCAM - Do 13:36
» Apple plant OLED-MacBook Pro, Mac Studio M6 Ultra und Mini-LED Studio Display
von slashCAM - Do 11:06
» Behind the Scenes - Gute Sammlung
von iasi - Do 10:08
» Nikon ZR in der Praxis: 6K 50p RED RAW Monster für 2.349,- Euro mit klassenbester Colorscience?
von Jott - Do 5:41
» Was hast Du zuletzt gekauft?
von Jörg - Mi 22:09
» Täglich über 15 Millionen US-Dollar Verlust? Sora 2 kommt OpenAI teuer zu stehen
von iasi - Mi 21:38
» ARRI Film Lab: Bewährte Color Science als OpenFX-Plugin
von Darth Schneider - Mi 19:23
» Panasonic beendet LUMIX PRO Service
von Jan - Mi 19:13
» Sony Xperia VII und FX3 / FX6
von j.t.jefferson - Mi 18:09
» Synchronisation mehrerer Kameras mit Unterbrechungen
von j.t.jefferson - Mi 16:17
» Datacolor SpyderX Pro unterstützt jetzt 3D-LUTs und Content Credentials
von dienstag_01 - Mi 12:09
» Das Audio ducking will nicht funktionieren
von Aloha - Mi 9:09
» ARRI Film Lab
von Clemens Schiesko - Di 23:07
» Middle Control 3.0 - Sony Kameras via ATEM steuern
von rush - Di 22:08
» Canon EOS R6 Mark III mit 32,5 MP-Sensor, 7K Raw 50/60p und Open Gate Aufnahme vorgestellt
von roki100 - Di 20:52
» Orbsmart R82 mit ZDMC AnzeigeWerbung
von Nvidia 3D - Di 18:17
» Neues Apple TV Intro - Logo aus Glas statt KI und CGI
von Darth Schneider - Di 16:03
» Frankenstein
von Darth Schneider - Di 7:21
» DJI Avata 360 - Leaks zeigen DJIs neue 360°-Drohne
von slashCAM - Mo 22:33
» DJI Air 3 Fly more Combo mit RC-N3 Controller
von v-empire - Mo 22:13
» Explosion bei Speicherpreisen? NAND und DRAM weltweit stark nachgefragt
von rush - Mo 16:12
» iPhone 17 Pro Max mit ProRes RAW - Rolling Shutter und Dynamik Sensortest
von Axel - Mo 15:54
» Mit Filmen GELD verdienen (Filminvests): Mit UWE BOLL
von Nigma1313 - Mo 14:54
» Workflow: 4K-Ausschnitt aus 8K?
von Jost - Mo 11:15
» Adobe Firefly Video-Editor angekündigt - Timeline-basierte KI-Cliperstellung
von slashCAM - Mo 9:36
» Kameradiebstahl
von Phil999 - Mo 0:10