Seite 1 von 1

Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Di 05 Aug, 2014 16:10
von slashCAM
Eine ziemlich phantastisch anmutende Technik hat ein Team von Wissenschaftlern des MIT, Microsofts und Adobe entwickelt, die es ermöglicht, aus reinen Videobildern vor Ort abgespielten Sound zu rekonstruieren
Bild

Hier geht es zur Newsmeldung mit Link und Bildern auf den slashCAM Magazin-Seiten:
Video als Mikrophon: Sound aus Bildern rekonstruieren

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Di 05 Aug, 2014 16:25
von ruessel
Ist schon wieder der erste April?

Ich kenne das mit den alten Ton-Vasen der Ägypter, Laserstrahl drauf - Reflexion messen und es kommen 4000 Jahre alte Gesänge wieder zum Vorschein, der Gesang hatte die Finger beim töpfern moduliert.... fake aus den 70er Jahren.

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Di 05 Aug, 2014 16:38
von gref
NSA… ick hör' dir trappsen.

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Di 05 Aug, 2014 17:00
von enilnacs
ruessel hat geschrieben:Ist schon wieder der erste April?

Ich kenne das mit den alten Ton-Vasen der Ägypter, Laserstrahl drauf - Reflexion messen und es kommen 4000 Jahre alte Gesänge wieder zum Vorschein, der Gesang hatte die Finger beim töpfern moduliert.... fake aus den 70er Jahren.
Nein, das ist mehr als nur echt. Der Rolling Shutter liefert bei Full HD (je nach Abtastungsart) bis zu 64 KHz Bandbreite bei 60p und 32 KHz bei 30p und IMMER noch 25 KHz bei 24p! (1080 Zeilen mal fps)
:-P Sogar 720p ist bei 24p mit 17 KHz dabei :-D LOL

Was schwieriger sicher ist, wäre das Vibrationsmedium auch im Bild zu haben und über GENUG Pixel. Bei Granit wird das wohl nicht gehen. Muss ja elastisch sein. Und ja, man kann die Pixelfrequenz vom Rauschverhalten wegrechnen. Ah, ja, und der Aufnahmeshutter muss bei min der 2x Aufnahme Frequenz liegen. (25p Shutter muss 1/50 sein min). Je höher desto besser.

Auch wenn man nur ein 8 kHz (Rauschen, Verluste, etc) hinkriegt, reicht das allemal für GSM Sprachqualität.

Film geht nicht, ist Globalshutter, auch alle Globalshutter Digicams. Aber so gut wie alle Smartphonevideos. :-P

;-) Jetzt stelle man sich vor was da auch an alten Videos analysiert werden können. Mein Fresse :-D

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Di 05 Aug, 2014 20:38
von lofi


Habe einfach das Bild eines Orcas bearbeitet
und als Spektrogram benutzt.

http://youtu.be/Hnw_2XQ88eM

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Di 05 Aug, 2014 22:29
von raf-dat
Das ist ja mal krank!
Wissenschaftlich genial, aber wofür das dann wahrscheinlich gebraucht wird...

Ich habe das in einem Film schonmal gesehen, ich glaube es war Eagle Eye. Dort hat ein Supercomputer herausgefunden, was in einem schalldichten Raum gesprochen wurde, weil er die Schwingungen einer Kaffeetasse mit einer Überwachungskamera aufzeichnen konnte.

Schon erstaunlich, wie weit wir heute sind.

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Mi 06 Aug, 2014 09:04
von Attero
Exakt an diese Filmsequenz musste ich auch denken ;) Schon krass, dass wir dort heute angekommen sind...

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Mi 06 Aug, 2014 09:24
von Skeptiker
raf-dat hat geschrieben:... Ich habe das in einem Film schonmal gesehen ...
Eine Art Vorläufer: HAL 9000 in '2001', der den Text von den Lippen der Astronauten liest, die sich - vermeintlich ungehört - in eine Raumkapsel zurückgezogen haben.

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Mi 06 Aug, 2014 10:43
von jk86
Die Technik ist alles andere als neu.

http://en.wikipedia.org/wiki/Laser_microphone

Neu ist höchstens der Einsatz in einem 2D-Medium.

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Mi 06 Aug, 2014 11:31
von handiro
Richtig, neu ist das nicht. Man könnte denken nach Snowden, wo ja über die Techniken berichtet wurde, wird das ganze jetzt als neue Spielerei auf "lustig" vorgeführt. Ähnlich der Drohnen...

Dann kann sich jeder Bürger als "Spion" verlustieren.....Stasi 3.0 sozusagen.

Allerdings ist die Klangqualität in diesem Beispiel so grottenschlecht, dass man mit den Resultaten nix anfangen kann. Mit highspeed Kamera, Laser oder Mikrowelle siehts schon anders aus.

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Mi 06 Aug, 2014 21:11
von Markus_Krippner
Da stell ich doch glatt meine Beleuchtung daheim auf LED um, in der Hoffnung, daß das Highspeed-Flickern der LEDs eine solche Aufnahme unbrauchbar macht ;-)

...markus :-)

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Do 07 Aug, 2014 02:46
von freacore
Hoffentlich kann man damit alte Stummfilmaufahmen mit Ton versehen. Das wäre sehr genial.

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Fr 08 Aug, 2014 13:29
von enilnacs
freacore hat geschrieben:Hoffentlich kann man damit alte Stummfilmaufahmen mit Ton versehen. Das wäre sehr genial.
Wäre toll, leider geht das nicht da man entweder Rolling Shutter oder eine Highspeedcamera braucht. Alles Digitaltechnik.

Bei Film geht das leider nicht, da Global Shutter (auch noch analog).

Aber vielleicht kommt irgendein Genie wieder daher und schafft es anders. Wer weiss. Ich dachte auch dass viele Dinge nicht möglich sind, und wurde dann eines Besseren belehrt. :-P
Jedes mal bin ich fasziniert was man so auf der Siggraph zB zeigt.

Re: Video als Mikrophon: Sound aus Bildern rekonstruieren

Verfasst: Fr 08 Aug, 2014 14:00
von Skeptiker
freacore hat geschrieben:Hoffentlich kann man damit alte Stummfilmaufahmen mit Ton versehen. Das wäre sehr genial.
Kommt darauf an ...
Vielleicht haben die Stummfilmstars sich zu den seriösen Szenen mit passender Mimik ja Dinge zugerufen wie: "Ich bin froh, wenn der Stress hier endlich vorbei ist. Der Regisseur hat offensichtlich einen an der Waffel, und bei der Hitze gibt's eigentlich nur einen Ort, wo man sich wohlfühlt: Das städtische Bad!".