slashCAM
Administrator
Administrator
Beiträge: 11279

FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von slashCAM »


FiLMiC das Unternehmen hinter den mobilen App FiLMiC Pro hat angekündigt, dass es eine hocheffiziente Bild-Remapping-Technologie namens Cubiform patentiert hat, die 4,75-...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

im machine lerning umfeld ist ein derartiges compilieren bzw. optimierendes ausführen und zusammenfassen von operationen mit ganz ähnlich gelagerten mehrdimensionalen datenarrays (tensors) mittlerweile nichts ungewöhnliches mehr.

begonnen hat das mit halide, in tvm wurde es dann massiv ausgebaut, und mittlerweile gibt es auch noch einige weitere alternativen in den verschiedenen ML-frameworks, die ähnliches bewirken. allerdings erfolgt dort die beschleunigung weniger über LUTs als über die automatische anwendung von optimierungen bzw. umformulierung der ausführungsanweisungen, wie sie sonst hauptsächlich in übersetzungslösungen für programmiersprachen zum einsatz kommen.

mich wundert es immer wieder, dass derartiges in den heutigen videoprogrammen nicht stärker genutzt wird.



srone
Beiträge: 10474

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von srone »

der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?

oder nur alter wein in neuen schläuchen, als plugin für andere nles?

lg

srone
ten thousand posts later...



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

srone hat geschrieben: ↑Mo 01 Mär, 2021 21:26 der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?
es ist halt ein völlig anderer lösungsweg als zwischenresultate zu cachen.
ich glaube eigentlich schon, dass das in einigen fällen tatsächlich ein großes beschleunigungspotential birgt.

allgemeiner gesprochen geht es hier ja um strategien, ketten von rechenoperation zu vereinfachen bzw. in möglichst vorteilhafter weise zu zusammenzulegen (=fusion). das kann in verarbeitungspipelines, wo oft sehr viele ähnliche operationen hintereinader wiederholt werden, die sich manchmal auf wenige tatsächlich nötige rechenschritte zusammenkürzen lassen, durchaus spürbare vorteile bringen.

es ist ja nicht ganz neu, dass man derartiges mit LUTs zu bewerkstelligen versucht, nur gibt's da halt die bekannten probleme mit der oft reichlich unbefriediegenden umsetzungsgenauigkeit. anderseits wird aber auch gerne übersehen, wie problematisch sich die rundungsfehler in den ansonsten genutzten ketten von hintereinander gereihten operationen auswirken können.

im machine learning umfeld hat sich letzteres problem so gravierend ausgewirkt, das in den urspünglichen formen des deep lernings nach etwa ein-zwei dutzend berechnungsschichten die rechenfehler größer als der zusätzliche prognosegewinn war, bis plötzlich ein ganz junger forscher einen trick ausprobiert hat, überall dort, wo keine auffälligen veränderungen mehr stattfinden bzw. faktisch nur mehr identitäts-relationen vorliegen, abkürzungswege ins netz der berechnungen einzubauen. die damit erfundenen Residual neural networks haben damals eine geradezu bahnbrechende verbesserung und erweiterbarkeit einiger lernmodelle eröffnet.

gut, die berechnungen und auswirkungen von rundungsfehlern, mit denen wir es hier in praxis in unseren videoprocessing pipelines zu tun haben, sind damit natürlich nichteinmal ansatzweise vergleichbar, trotzdem handelt es sich dabei um eine problematik, die man nicht völlig außer acht lassen sollte.



TheBubble
Beiträge: 2055

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von TheBubble »

Es ist kein Problem, alles mögliche über LUTs vorzuberechnen, nur leider werden sie irgendwann unglaublich groß.



 Aktuelle Beiträge [alle Foren]
 
» DJI Neo 2 bringt Rundum-Hinderniserkennung samt LiDAR
von slashCAM - Do 17:42
» Neue Firmware für Sony Alpha 1 II und Sony Alpha 9 III bringt neue Funktionen
von slashCAM - Do 13:33
» 110-Ohm-Mikrofonkabel Wasserdicht bis 20 m
von Blackbox - Do 3:55
» KI: Bessere Sprachverständlichkeit
von freezer - Mi 22:24
» Dumpfe Audiospur als ob sie im Auto laufen würde
von toniwan - Mi 20:10
» Forscher suchen die maximale Pixelauflösung der Augen
von Darth Schneider - Mi 19:17
» Künftige Xbox Next: Vollwertiger Windows-PC mit Potenzial für Videobearbeitung
von Da_Michl - Mi 16:35
» Was hast Du zuletzt gekauft?
von FocusPIT - Mi 12:52
» Bitte um Rat nach langer, aber verwirrender Recherche
von Jott - Mi 11:47
» SCHLECHTE Regisseure? Mit Wilson Gonzalez Ochsenknecht
von Nigma1313 - Mi 10:42
» >Der LED Licht Thread<
von pillepalle - Mi 1:26
» Canon EOS R6 Mark III Neuvorstellung am 06.11.25
von cantsin - Di 22:00
» slashCam im Gespräch mit Nikon zur neuen ZR und der Zukunft von RED Komodo
von iasi - Di 18:53
» DJI im neuen Gewand: Xtra
von medienonkel - Di 17:13
» Neues Firmware Update 3.0 für die Nikon Zf Kamera
von Funless - Di 14:46
» Insta360 X4 Air vorgestellt - 8K/360° Action-Kamera für 329 Euro
von slashCAM - Di 13:15
» Kathryn Bigelows "A House of Dynamite" - das ist mal was.
von iasi - Di 13:03
» Empfehlung Hauptmikros Stereo Chor- / Orchester
von mikroguenni - Di 12:52
» OpenAI Sora 2 - Nutzungsrichtlinie entfacht internationalen Urheberrechtsstreit
von philr - Di 10:47
» DJI Neo 2 kommt am 30. Oktober mit LiDAR und größerem Sensor
von medienonkel - Di 9:50
» Unser Kinofilm "The Trail" nun auf Amazon Prime
von Alfred Zarathustra - Mo 23:19
» Canons restriktive Mount-Politik: Clever oder der Impuls für eine chinesische DSLM?
von env0 - Mo 17:53
» Lernen von ALFRED HITCHCOCK - Wie entstand Psycho?
von stip - Mo 17:03
» Mein VTube-kanal-Projekt auf YouTube,...
von walang_sinuman - Mo 7:17
» LG UltraFine 40U990A-W - 40" 5K2K Monitor mit Thunderbolt 5
von chackl - So 19:24
» Leica M EV1: Leica M mit elektronischem Sucher zu einem niedrigeren Preis vorgestellt
von rkunstmann - So 19:12
» Neue Firmware für Panasonic LUMIX S5 II, S5 IIX, S9, GH7 und G9 II
von Darth Schneider - So 13:32
» Sound Matters - Podcast zum Thema Production Sound
von pillepalle - So 8:13
» Alien: Romulus - Teaser Trailer online - produziert von Ridley Scott, gedreht auf Alexa 35
von iasi - Sa 22:16
» Einblicke in die VFX-Arbeit von Todd Vaziri bei ILM / Star Wars u.ä.
von slashCAM - Sa 16:39
» Konkurrenz für IMAX - Neues HDR-Premiumkinoformat Vue Epic für Europa
von Jott - Sa 13:45
» Neues Musikvideo Team Drama „Baby“
von Bildlauf - Sa 11:10
» Lokale KI ist jetzt WIRKLICH brauchbar
von ruessel - Sa 10:53
» Frühjahrsputz im Herbst :)
von rush - Sa 9:36
» Windows 11 und Adobe CS6
von Herbie - Fr 20:14