Logo Logo
/// 

Differenzbild berechnen zwischen Frames geht das?



Noch was unklar? Dann in unserem Forum nachfragen!


Frage von Alen Zurfluh:


Hallo Leute

Für meine Diplomarbeit muss ich recht grosses Problem lösen, und ich
weiss nicht recht wie.

Ich nehme pro Tag eine grosse Daten-Menge an Video auf. Recht
starkkomprimiert mit dem XVID-Codec.

Jetzt ist es so, dass ich zu gegebenen Zeitpunkten eine Art "Motion
Detection" machen muss.

D.h. ich muss Frames die t Zeitschritte auseindander liegen
miteinander vergleichen. Dazu möchte ich ein FrameFrame im Glossar erklärt in Segemente
unterteilen, z.b. 9 Sektoren.
Und dann möchte ich sagen, dass sich z.b. im Sektor rechts-oben etwas
geändert hat. Diese Information soll dann in ein Text-File geschrieben
werden, usw.

Ich denke man muss irgendwie ein Differenzbild zwischen den einzelnen
Frames herstellen. Und dann sollte man anhand des Differenzbildes
sehen, wo sich was geändert hat.

1) Wie kriege aus meinem Videostream die einzelnen Frames raus um sie
zu vergleichen?

Das muss irgendwie automatisch gehen, weil ich werde eine Unmenge an
Video-Daten verarbeiten müssen.

2) wie vergleiche ich die einzelnen Frames ?

Hat jemand schon etwas Ähnliches gemacht? Es geht eigentlich um
Feature Extraktion und dann mal Dataming: Dazu muss ich aber eben die
Features (;Bildveränderungen) im Videostream extrahieren können

Vielen Dank für eure Hilfe!
Gruss
Alen




Antwort von Ottfried Schmidt:

On 6 Apr 2004 01:37:19 -0700, alen.zurfluh@gmx.ch (;Alen Zurfluh)
wrote:

>Jetzt ist es so, dass ich zu gegebenen Zeitpunkten eine Art "Motion
>Detection" machen muss.

>Ich denke man muss irgendwie ein Differenzbild zwischen den einzelnen
>Frames herstellen. Und dann sollte man anhand des Differenzbildes
>sehen, wo sich was geändert hat.
>
>1) Wie kriege aus meinem Videostream die einzelnen Frames raus um sie
>zu vergleichen?
>
>Das muss irgendwie automatisch gehen, weil ich werde eine Unmenge an
>Video-Daten verarbeiten müssen.

>2) wie vergleiche ich die einzelnen Frames ?

Alle diese Aufgaben lassen sich mittels AVISynth erledigen. Allerdings
ist die Script-Programmierung alles andere als banal, da in diesem
Fall nicht nur die Standard-Befehle zur Anwendung kommen müssen,
sondern auch die Conditional Filter (;mit denen ich mich auch nicht
soooo gut auskenne).

Schau mal ins englische Doom9-Forum, wo unter anderem auch der
Programmierer von AVISynth anzutreffen ist, die wissen sicher, wie
Deine Aufgabenstellung zu lösen ist.





Antwort von Heiko Nocon:

Alen Zurfluh wrote:

>Für meine Diplomarbeit muss ich recht grosses Problem lösen
[...]

Das ist nicht wirklich ein großes Problem, sondern mehr sowas wie
Bildverarbeitung für Einsteiger. Ich bezweifele ernsthaft, daß das eine
Diplomarbeit wird.

>Ich denke man muss irgendwie ein Differenzbild zwischen den einzelnen
>Frames herstellen.

Guter Ansatz schonmal. Da fehlt eigentlich nur noch das Nachdenken über
die Vermeidung systematischer Fehler, die die weitere Verarbeitung
stören könnten und schon an diese Stelle weitgehend ausgemerzt werden
könnten. Hint: Eine Leuchtstofflampe, die die Szenarie beleuchtet,
flackert...

>Und dann sollte man anhand des Differenzbildes
>sehen, wo sich was geändert hat.

Genau. Aber hier kommen dann solche Sachen wie Rauschen in's Spiel. Also
mußt du wenigstens über Schwellwerte nachdenken.

>1) Wie kriege aus meinem Videostream die einzelnen Frames raus um sie
>zu vergleichen?

Du liest das File und decodierst die Frames, was dachtest du denn? Bei
hochkomprimierenden Codecs mußt du natürlich oft ein Stück vor t0
anfangen mit lesen und decodieren, spätestens nämlich beim
vorhergehenden Keyframe.

>Das muss irgendwie automatisch gehen

Wenn irgendwas "automatisch" gehen soll, dann macht man was? Richtig:
man sagt dem Automaten, was er tuen soll. Man schreibt ein Programm.

>Hat jemand schon etwas Ähnliches gemacht?

Viele Leute. Es gibt sogar fertige, sehr mächtige
Bildverarbeitungssysteme zu kaufen, die das, was du hier angefragt hast
schon von sich aus leisten und an die man im Bedarfsfall für weitere
Auswertungen beliebige Sekundärsoftware andocken kann.

>Es geht eigentlich um
>Feature Extraktion und dann mal Dataming

Das sollte sicher Datamining heißen. Wer mit solchen Wörtern wedelt,
sollte Google eigentlich kennen, ich erspare mir den expliziten Hinweis
darauf deshalb...







Antwort von Matthias Wieser:

Alen Zurfluh wrote:

> Hallo Leute
>
> Für meine Diplomarbeit muss ich recht grosses Problem lösen, und ich
> weiss nicht recht wie.

Lade dir Knoppix runter, das hat alles, was du brauchst.

> 1) Wie kriege aus meinem Videostream die einzelnen Frames raus um sie
> zu vergleichen?

Mit einem Abspielprogramm, das z.B. PNGs ausgeben kann?

> Das muss irgendwie automatisch gehen, weil ich werde eine Unmenge an
> Video-Daten verarbeiten müssen.

klar.

>
> 2) wie vergleiche ich die einzelnen Frames ?
>

z.B. mit Imagemagic





Antwort von Alen Zurfluh:

Hi Heico und ihr andern, die mir geholfen habt.

> >Für meine Diplomarbeit muss ich recht grosses Problem lösen
> [...]
>
> Das ist nicht wirklich ein großes Problem, sondern mehr sowas wie
> Bildverarbeitung für Einsteiger. Ich bezweifele ernsthaft, daß das eine
> Diplomarbeit wird.

Na ja, da hatte ich aber Glück, wenn das Deiner Meinung soo einfach ist.
Mein Prof. verlangt nicht mehr.
Ich haben eben noch nie so etwas in der Art gemacht. Deshalb brauche ich
eben ein bisschen Hilfe :-)

> >Ich denke man muss irgendwie ein Differenzbild zwischen den einzelnen
> >Frames herstellen.
>
> Guter Ansatz schonmal. Da fehlt eigentlich nur noch das Nachdenken über
> die Vermeidung systematischer Fehler, die die weitere Verarbeitung
> stören könnten und schon an diese Stelle weitgehend ausgemerzt werden
> könnten. Hint: Eine Leuchtstofflampe, die die Szenarie beleuchtet,
> flackert...

Ok, auf so "Dinge" muss ich aufpassen!

>
> >Und dann sollte man anhand des Differenzbildes
> >sehen, wo sich was geändert hat.
>
> Genau. Aber hier kommen dann solche Sachen wie Rauschen in's Spiel. Also
> mußt du wenigstens über Schwellwerte nachdenken.

Genau, ich werde mir wohl überlegen müssen - wie ich das handhabe! Die
"Motion Detection" soll sehr "grob sein".
Wir filmen ein Büro und wollen wissen, ob sich der Arbeitende im Büro bewegt
oder nicht, und ungefähr wo.

> >1) Wie kriege aus meinem Videostream die einzelnen Frames raus um sie
> >zu vergleichen?
>
> Du liest das File und decodierst die Frames, was dachtest du denn? Bei
> hochkomprimierenden Codecs mußt du natürlich oft ein Stück vor t0
> anfangen mit lesen und decodieren, spätestens nämlich beim
> vorhergehenden Keyframe.
>

Ok, und wie liest und decodiert man die files so in der Praxis?
Das ganze muss auf die Sekunde genau stimmen, weil ich parallel auch Audio
aufzeichne, später dann muss ich alle
Sensor-Inputs miteinander vergleichen können. D.h. die "Features" müssen
synchron sein.
Der "Takt-Zähler" der Sensoren ist das Telefon. Wenn jemand anruft, muss ich
wissen, ob sich der Angerufene vor dem Telefon-Anruf bewegt, ob er spricht
etc.
Mit diesen Daten soll auf die Unterbrechbarkeit des Angerufen geschlossen
werden können (;Deshalb das Data-Mining). Mein Algorithmus der die Features
auswertet muss dann wissen, ob der Angerufe
für den Anruf unterbrechbar ist oder nicht, und je nachdem den Anruf
durchstellen oder umleiten auf die Mailbox...

So trivial ist meine Dipl. Abreit doch nicht:(;

> >Das muss irgendwie automatisch gehen
>
> Wenn irgendwas "automatisch" gehen soll, dann macht man was? Richtig:
> man sagt dem Automaten, was er tuen soll. Man schreibt ein Programm.

Ok, ok..schon klar. Gut wäre halt irgendein Programm/Programmiersprache, mit
der man so Skripts schreiben könnte, die Bildverarbeitung machen können.
Eben Frames vergleichen etc.
Wäre halt Tool wenn es schon irgendwas "Fertiges" gibt, ich will ja nicht
unbedingt das Rad neu erfinden :-) Persönlich kenne ich eben "nur" Java und
Perl

> >Hat jemand schon etwas Ähnliches gemacht?
>
> Viele Leute. Es gibt sogar fertige, sehr mächtige
> Bildverarbeitungssysteme zu kaufen, die das, was du hier angefragt hast
> schon von sich aus leisten und an die man im Bedarfsfall für weitere
> Auswertungen beliebige Sekundärsoftware andocken kann.

Das wären z.B was für Systeme ?
Adobe Premiere ?

Danke für Eure Ratschläge!

Gruss





Antwort von Alen Zurfluh:


> >
> > Für meine Diplomarbeit muss ich recht grosses Problem lösen, und ich
> > weiss nicht recht wie.
>
> Lade dir Knoppix runter, das hat alles, was du brauchst.

Ich benutze RedHat, welche App's von Knoppix meinst Du genau?

> > 2) wie vergleiche ich die einzelnen Frames ?
> >
>
> z.B. mit Imagemagic

Danke für Deinen Hinweis, werde ich mal austesten!





Antwort von Matthias Wieser:

Alen Zurfluh wrote:

>> Lade dir Knoppix runter, das hat alles, was du brauchst.
>
> Ich benutze RedHat, welche App's von Knoppix meinst Du genau?

Mplayer, transcode,...






Noch was unklar? Dann in unserem Forum nachfragen!


Antworten zu ähnlichen Fragen:
Fehlende Bilder zwischen zwei Clips berechnen
Grenzen zwischen .VOB-Dateien - unvollständige frames
Standbild in 3D - wie geht"n das?
Multicam-DVD - geht das?
Akku Füllstandschip defekt, geht das?
Surfstick an Android-Tablet, geht das?
Showreel, wie geht man das an?
ProRes zu DNG konvertieren geht das?
PP CC 2014 und Nvidia GT8600 geht das?
Greenscreen outdoor - geht das ohne Zusatzlicht?
50i in 25p umwandeln, wie geht das?
edius 6.05, audiokanäle L und R tauschen. geht das?
"Läuft in NTSC" geht das für immer weg?
Ton aus DVD extrahieren - wie geht das?
Workstation PC in einem anderen Raum nutzen. Geht das?
NTSC + PAL auf DVD mischen: Geht das?
Fernseher kalibrieren - mit Spyder? Wie geht das?
Demuxen, mp2 nach mp3 wie geht das
DVD nach AVI konvertieren, wie geht das?
Namensanzeige bei einer Doku. Wie geht das richtig?
Frage: GH4 und Alphatron EVF-035W-3G geht das?
Neu verknüpfte Clips zurück ins Projektfenster, geht das?
Real- Time Video Capture mit Compression, geht das?
Adobe Media Encoder - Video Splitten oder Teilen geht das?
Geht das: MPG2 Datei direkt auf DVD im DVDPlayer abspielen?
Osram VS340 & AF281 an Panasonic GH3 verwenden? Geht das?

















weitere Themen:
Spezialthemen


16:9
3D
4K
ARD
ARTE
AVCHD
AVI
Adapter
Adobe After Effects
Adobe Premiere Pro
After effects
Akku
Akkus
Apple Final Cut Pro
Audio
Aufnahme
Aufnahmen
Avid
Band
Bild
Bit
Blackmagic
Blackmagic Design DaVinci Resolve
Blende
Book
Brennen
Cam
Camcorder
Camera
Canon
Canon EOS 5D MKII
Canon EOS C300
Capture
Capturing
Cinema
Clip
ClipKanal
Clips
Codec
Codecs
DSLR
Datei
Digital
ENG
EOS
Effect
Effekt
Effekte
Export
Fehler
Festplatte
File
Film
Filme
Filmen
Filter
Final Cut
Final Cut Pro
Format
Formate
Foto
Frage
Frame
HDMI
HDR
Hilfe
Import
JVC
Kabel
Kamera
Kanal
Kauf
Kaufe
Kaufen
Kurzfilm
Layer
Licht
Live
Lösung
MAGIX video deLuxe
MPEG
MPEG-2
MPEG2
Mac
Magix
Magix Vegas Pro
Menü
Mikro
Mikrofon
Mikrophone
Monitor
Movie
Musik
Musikvideo
NAB
Nero
News
Nikon
Objektiv
Objektive
PC
Panasonic
Panasonic GH2
Panasonic HC-X1
Panasonic S1 mit V-Log
Pinnacle
Pinnacle Studio
Player
Plugin
Plugins
Premiere
Projekt
RAW
RED
Recorder
Red
Render
Rendern
Schnitt
Software
Sony
Sound
Speicher
Stativ
Stative
Streaming
Studio
TV
Test
Titel
Ton
USB
Umwandeln
Update
Vegas
Video
Video-DSLR
Videos
Videoschnitt
Windows
YouTube
Zoom

Specialsschraeg
18-22. September / Münster
Filmfestival Münster
19-22. September / Bremen
Filmfest Bremen
22. September / Essen
Essener Video Rodeo | Kurzfilme aus dem Ruhrgebiet
4-5. Oktober / Espelkamp
Filmfestival SPITZiale
alle Termine und Einreichfristen


update am 19.September 2019 - 18:33
slashCAM
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*