Logo Logo
/// 

Editorials : Die Zukunft des Tracking - das Ende der High-Speed-Kameras?

von Di, 27.Juni 2023 | 3 Seiten | diesen Artikel auf einer Seite lesen

 Vorhang auf für Omnimotion und TAPIR

Neue Echtzeit 3D-Effekte von Canopus



Vorhang auf für Omnimotion und TAPIR



Und eben dies könnte sich schon in Kürze ändern. Denn die Cornell University, Google Research sowie UC Berkeley haben die Ergebnisse eines universitären Forschungsprojekts veröffentlicht, welches nichts weniger als einen nahezu perfekten Optical Flow Algorithmus verspricht. Das Paper trägt den vielsagenden Titel: "Tracking Everything Everywhere All at Once" - was man durchaus wörtlich nehmen darf.



Denn während heute praktisch eingesetzte Optical Flow Algorithmen nur relativ wenige Pixel verfolgen und dies meist nicht einmal über eine längere zeitliche Distanz schaffen, soll Omnimotion ALLE Pixel eines Videos über die volle Länge eines Clips zuverlässig tracken können. Und selbstredend sollen Pixel auch zeitweise das Bild verlassen oder von anderen Objekten verdeckt werden können.

Das klingt erst einmal nach einer großlippigen Ansage, doch die zugehörige Website zeigt erstaunliche Ergebnisse des Omnimotion-Projektes. Man kann sogar an einem Live-Beispiel Clip wirkliche beliebige Punkte in einem Online-Video auswählen und sehen, wie diese exakt im Browser Video getrackt werden.



Außerdem beweist das Projekt guten Forschungsstil, indem es auf der Webseite zugleich Failure Cases anführt, bei denen der Algorithmus versagt hat. Bei den gezeigten Beispielen könnte allerdings ein Mensch wahrscheinlich die kritischen Pixel des Rohmaterials nicht mehr eindeutig verfolgen.



Und kaum ist Omnimotion aus der Forschungswelt ins Licht der Öffentlichkeit getreten, stellte eine weitere Gruppe um Google DeepMind und der Oxford Universität ein neues Tracking Verfahren namens TAPIR vor, welches ebenfalls jeden Punkt eines Videos verfolgen kann. Es ist daher anzunehmen, dass diese Trackingmethoden in Kürze auch in kommerzieller Software Einsatz finden werden.

Einleitung / In der Praxis
Was bedeutet perfektes Tracking für die Postproduktion?


3 Seiten:
Einleitung / In der Praxis
Vorhang auf für Omnimotion und TAPIR
Was bedeutet perfektes Tracking für die Postproduktion?
  

[6 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
Rick SSon    10:02 am 5.7.2023
Ich finde die Entwicklung ja schön, aber sind nicht heutzutage sowieso schon beinah alle Medien überstilisiert? Persönlich messe ich den Erfolg eines Drehs eigentlich daran,...weiterlesen
medienonkel    15:50 am 29.6.2023
Indiana Jones 6 -auf der Suche nach dem bewährten Artefakt
MK    20:38 am 28.6.2023
Aber immerhin bewährte Artefakte... ;-)
[ Alle Kommentare ganz lesen]

Weitere Artikel:


Editorials: Die IBC 2023 und die KI-Revolution - War da was oder kommt das noch? Mi, 20.September 2023
Die IBC hat gerade wieder ihre Pforten geschlossen - doch von generativer Video KI war noch nichts zu sehen.
Editorials: Die Zukunft der Hybrid-Kameras - wohin geht die Reise? Fr, 2.Juni 2023
Sind hybride Kameras für die szenische Arbeit etwa "fertig" entwickelt? Und falls ja, was bedeutet dies für die Zukunft dieser Geräteklasse?
Editorials: Stockt die KI-Revolution in der Videoproduktion? Di, 7.März 2023
Aktuelle Technologien wie Stable Diffusion lassen eine KI-zentrierte Videoproduktion als bald greifbare Realität erscheinen. Doch bei den großen Softwareherstellern scheint dagegen eher KI-Stillstand zu herrschen...
Editorials: Aus dem Uncanny Valley mitten ins Herz Mo, 28.November 2022
Kürzlich hat Roope Rainisto ein KI-Dreambooth Modell für "Realistische Fotos" präsentiert. Und dabei ist uns klar geworden, dass wir mittlerweile einen Kipppunkt bei der Erzeugung realistischer Fotos mittels Künstlicher Intelligenz überschritten haben...
Editorials: Sapphire F8 - Spekulationen zum neuen Atomos Sensor Mi, 23.November 2022
Editorials: Dynamik und Belichtungsspielraum - Hintergründe zum slashCAM Dynamik Vergleich Do, 17.November 2022
Editorials: ARRI und RED Medien unter Windows nicht mehr lesbar - Microsoft UDF Probleme Di, 19.Juli 2022
Editorials: Sonys Sensor-Visionen - Smartphones übertreffen DSLMs ab 2024 Mo, 13.Juni 2022
Editorials: Canon und RED - gemeinsame Sache(n)? Mo, 21.Februar 2022
Editorials: Die slashCAM Highlights des Jahres: Was hat uns beeindruckt, begeistert, überrascht ...? Do, 6.Januar 2022
Editorials: COMPUTEX 2021 für Editoren - AMD imponiert mit stacked Cache CPU , GPUs bleiben knapp Fr, 4.Juni 2021
Editorials: Panasonic LUMIX GH6 - Was da kommen mag... Di, 25.Mai 2021


[nach oben]


[nach oben]















Artikel-Übersicht



Artikel-Kategorien:



update am 21.September 2023 - 15:02
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*