slashCAM
Administrator
Administrator
Beiträge: 11264

FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von slashCAM »


FiLMiC das Unternehmen hinter den mobilen App FiLMiC Pro hat angekündigt, dass es eine hocheffiziente Bild-Remapping-Technologie namens Cubiform patentiert hat, die 4,75-...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

im machine lerning umfeld ist ein derartiges compilieren bzw. optimierendes ausführen und zusammenfassen von operationen mit ganz ähnlich gelagerten mehrdimensionalen datenarrays (tensors) mittlerweile nichts ungewöhnliches mehr.

begonnen hat das mit halide, in tvm wurde es dann massiv ausgebaut, und mittlerweile gibt es auch noch einige weitere alternativen in den verschiedenen ML-frameworks, die ähnliches bewirken. allerdings erfolgt dort die beschleunigung weniger über LUTs als über die automatische anwendung von optimierungen bzw. umformulierung der ausführungsanweisungen, wie sie sonst hauptsächlich in übersetzungslösungen für programmiersprachen zum einsatz kommen.

mich wundert es immer wieder, dass derartiges in den heutigen videoprogrammen nicht stärker genutzt wird.



srone
Beiträge: 10474

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von srone »

der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?

oder nur alter wein in neuen schläuchen, als plugin für andere nles?

lg

srone
ten thousand posts later...



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

srone hat geschrieben: Mo 01 Mär, 2021 21:26 der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?
es ist halt ein völlig anderer lösungsweg als zwischenresultate zu cachen.
ich glaube eigentlich schon, dass das in einigen fällen tatsächlich ein großes beschleunigungspotential birgt.

allgemeiner gesprochen geht es hier ja um strategien, ketten von rechenoperation zu vereinfachen bzw. in möglichst vorteilhafter weise zu zusammenzulegen (=fusion). das kann in verarbeitungspipelines, wo oft sehr viele ähnliche operationen hintereinader wiederholt werden, die sich manchmal auf wenige tatsächlich nötige rechenschritte zusammenkürzen lassen, durchaus spürbare vorteile bringen.

es ist ja nicht ganz neu, dass man derartiges mit LUTs zu bewerkstelligen versucht, nur gibt's da halt die bekannten probleme mit der oft reichlich unbefriediegenden umsetzungsgenauigkeit. anderseits wird aber auch gerne übersehen, wie problematisch sich die rundungsfehler in den ansonsten genutzten ketten von hintereinander gereihten operationen auswirken können.

im machine learning umfeld hat sich letzteres problem so gravierend ausgewirkt, das in den urspünglichen formen des deep lernings nach etwa ein-zwei dutzend berechnungsschichten die rechenfehler größer als der zusätzliche prognosegewinn war, bis plötzlich ein ganz junger forscher einen trick ausprobiert hat, überall dort, wo keine auffälligen veränderungen mehr stattfinden bzw. faktisch nur mehr identitäts-relationen vorliegen, abkürzungswege ins netz der berechnungen einzubauen. die damit erfundenen Residual neural networks haben damals eine geradezu bahnbrechende verbesserung und erweiterbarkeit einiger lernmodelle eröffnet.

gut, die berechnungen und auswirkungen von rundungsfehlern, mit denen wir es hier in praxis in unseren videoprocessing pipelines zu tun haben, sind damit natürlich nichteinmal ansatzweise vergleichbar, trotzdem handelt es sich dabei um eine problematik, die man nicht völlig außer acht lassen sollte.



TheBubble
Beiträge: 1910

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von TheBubble »

Es ist kein Problem, alles mögliche über LUTs vorzuberechnen, nur leider werden sie irgendwann unglaublich groß.



 Aktuelle Beiträge [alle Foren]
 
» Dehancer Pro - Filmsimulation auf höchstem Niveau
von MK - So 3:55
» Neue Umfrage: Meine nächste Kamera wird eine
von roki100 - So 3:03
» DJI Focus Pro: Objektivsteuerungssystem per LiDAR jetzt für alle Kameras
von roki100 - So 3:01
» Heinz Hoenig Spendenaktion
von MK - So 1:42
» Blackmagic Cinema Camera 6K Sensor Test - Rolling Shutter, Debayering und Dynamik
von Clemens Schiesko - So 1:12
» RED günstiger als gedacht? Nikon übernimmt RED für knapp 85 Millionen Dollar
von roki100 - Sa 23:10
» Nikon übernimmt RED und wird auf einen Schlag Big Player im Cine Kamera Markt
von roki100 - Sa 22:57
» Überarbeitet: SmallRig NP-F970 USB-C Rechargeable Kamera-Akkus
von rush - Sa 20:55
» Was schaust Du gerade?
von klusterdegenerierung - Sa 20:44
» SORA - nächste Runde
von Alex - Sa 13:15
» Können KI-generierte Bilder, Klänge und Videos von jedermann frei genutzt werden?
von Frank Glencairn - Sa 10:25
» SanDisk Desk Drive - externe 4TB /8TB SSDs vorgestellt
von MK - Sa 10:14
» Original BMPCC + Metabons Speeadapter für BMPCC + Tamron 17-50 f/2,8 - gebraucht, kaum genutzt
von Gabriel_Natas - Sa 7:00
» Mein neues demo reel
von klusterdegenerierung - Fr 23:32
» After Effects Aces ODT
von Hranimator - Fr 22:59
» Fujifilm X Summit Sydney 16. Mai 2024, Vorstellung neuer Kameras und Objektive
von Jan - Fr 19:49
» HDD Gehäuse ohne Netzteil?
von Skeptiker - Fr 18:38
» HDR Referenzscheibe? HDR im DIY?
von ruessel - Fr 17:36
» "America First": Deutsche Streaming-Nutzer verschmähen lokale Inhalte
von Frank Glencairn - Fr 16:36
» AMDs Notebook APU Strix Halo - besser als Apples M3 Pro Chip?
von Magnetic - Fr 15:52
» Musikvideo Floridas Klaus "Che Guevara"
von Magnetic - Fr 15:46
» Erster Trailer zu Francis Ford Coppolas Megalopolis erschienen
von CineMika - Fr 14:13
» Ein paar Resolve-Tricks
von Axel - Fr 13:06
» 1,7x anamorphotischer MF-Adapter für Samyang V-AF Serie vorgestellt
von slashCAM - Fr 11:57
» Atem Mini Extreme HDMI Problem
von MK - Fr 11:55
» RED ist nun eine Nikon-Tochter - und Jarred Land abgesetzt
von cantsin - Fr 10:42
» Sky Projection - 3D in der Luft
von Frank Glencairn - Fr 7:06
» Kamera Kaufberatung Budget ca. 2000€
von Videoeditor_2000 - Do 20:30
» Peinlichkeiten auf der Leinwand: 10 Filme, die 2024 nicht mehr veröffentlicht werden könnten
von Bluboy - Do 18:15
» Aputure Amaran AL-MX: DYI Diffusorscheibe
von Jalue - Do 18:15
» Neues von Sigma am 26.03. - 50mm F1.2 Art für Sony E- und L-Mount?
von cantsin - Do 18:03
» Blackmagic Pyxis PL - Kaufberatung
von roki100 - Do 17:34
» Was hast Du zuletzt gekauft?
von Skeptiker - Do 16:25
» Canon C70 IS mit Sigma 24-70mm
von funkytown - Do 13:05
» iPad Pro12,9“ 6.Gen. plus Zubehör
von Axel - Do 9:40