slashCAM
Administrator
Administrator
Beiträge: 11279

FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von slashCAM »


FiLMiC das Unternehmen hinter den mobilen App FiLMiC Pro hat angekündigt, dass es eine hocheffiziente Bild-Remapping-Technologie namens Cubiform patentiert hat, die 4,75-...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

im machine lerning umfeld ist ein derartiges compilieren bzw. optimierendes ausführen und zusammenfassen von operationen mit ganz ähnlich gelagerten mehrdimensionalen datenarrays (tensors) mittlerweile nichts ungewöhnliches mehr.

begonnen hat das mit halide, in tvm wurde es dann massiv ausgebaut, und mittlerweile gibt es auch noch einige weitere alternativen in den verschiedenen ML-frameworks, die ähnliches bewirken. allerdings erfolgt dort die beschleunigung weniger über LUTs als über die automatische anwendung von optimierungen bzw. umformulierung der ausführungsanweisungen, wie sie sonst hauptsächlich in übersetzungslösungen für programmiersprachen zum einsatz kommen.

mich wundert es immer wieder, dass derartiges in den heutigen videoprogrammen nicht stärker genutzt wird.



srone
Beiträge: 10474

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von srone »

der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?

oder nur alter wein in neuen schläuchen, als plugin für andere nles?

lg

srone
ten thousand posts later...



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

srone hat geschrieben: Mo 01 Mär, 2021 21:26 der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?
es ist halt ein völlig anderer lösungsweg als zwischenresultate zu cachen.
ich glaube eigentlich schon, dass das in einigen fällen tatsächlich ein großes beschleunigungspotential birgt.

allgemeiner gesprochen geht es hier ja um strategien, ketten von rechenoperation zu vereinfachen bzw. in möglichst vorteilhafter weise zu zusammenzulegen (=fusion). das kann in verarbeitungspipelines, wo oft sehr viele ähnliche operationen hintereinader wiederholt werden, die sich manchmal auf wenige tatsächlich nötige rechenschritte zusammenkürzen lassen, durchaus spürbare vorteile bringen.

es ist ja nicht ganz neu, dass man derartiges mit LUTs zu bewerkstelligen versucht, nur gibt's da halt die bekannten probleme mit der oft reichlich unbefriediegenden umsetzungsgenauigkeit. anderseits wird aber auch gerne übersehen, wie problematisch sich die rundungsfehler in den ansonsten genutzten ketten von hintereinander gereihten operationen auswirken können.

im machine learning umfeld hat sich letzteres problem so gravierend ausgewirkt, das in den urspünglichen formen des deep lernings nach etwa ein-zwei dutzend berechnungsschichten die rechenfehler größer als der zusätzliche prognosegewinn war, bis plötzlich ein ganz junger forscher einen trick ausprobiert hat, überall dort, wo keine auffälligen veränderungen mehr stattfinden bzw. faktisch nur mehr identitäts-relationen vorliegen, abkürzungswege ins netz der berechnungen einzubauen. die damit erfundenen Residual neural networks haben damals eine geradezu bahnbrechende verbesserung und erweiterbarkeit einiger lernmodelle eröffnet.

gut, die berechnungen und auswirkungen von rundungsfehlern, mit denen wir es hier in praxis in unseren videoprocessing pipelines zu tun haben, sind damit natürlich nichteinmal ansatzweise vergleichbar, trotzdem handelt es sich dabei um eine problematik, die man nicht völlig außer acht lassen sollte.



TheBubble
Beiträge: 2023

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von TheBubble »

Es ist kein Problem, alles mögliche über LUTs vorzuberechnen, nur leider werden sie irgendwann unglaublich groß.



 Aktuelle Beiträge [alle Foren]
 
» Was schaust Du gerade?
von Funless - Mo 23:31
» Biete: Betacam PVW-2650P, DVW-A500P und PVW-2800P
von stynx - Mo 22:13
» Interview Bildwinkel tauschen
von pillepalle - Mo 22:10
» Kamera fürs TV / Doku
von Darth Schneider - Mo 21:37
» S: Videokamera
von Darth Schneider - Mo 21:13
» Deity Theos vs Sennheiser EW DP - Erfahrungen?
von rush - Mo 19:16
» Sony Burano: Kostenfreier Austausch des Infrarot-Sperrfilters bis Mai 2026
von ruessel - Mo 18:04
» Nvidias SUPER-Modelle RTX 5070 / Ti / 5080 mit deutlich mehr Speicher
von Tscheckoff - Mo 12:49
» Erstes Update von DaVinci Resolve 20 - u.a. mit Blackmagic RAW SDK 4.6
von freezer - Mo 12:36
» Werbung - es geht auch gut ;) Sammelthread
von Alex - Mo 7:45
» Hollywood in der Krise: Kalifornien erhöht Steueranreize für Dreharbeiten
von 7River - Mo 7:25
» Blackmagic URSA Cine 17K 65 bekommt Netflix Zertifizierung
von iasi - So 22:43
» Insta360 Flow 2: 3-Achsen Smartphone-Gimbal mit automatischem KI-Tracking
von slashCAM - So 9:15
» Vermutlich 8k 60fps bei Sony A7V?
von Jott - So 6:28
» YoloLiv YoloCam S7 - 4K Streaming-Kamera mit MFT-Sensor, Wechselmount und Dual Native ISO
von Darth Schneider - Sa 21:15
» Panasonic S1 mit Ausrüstung zu verkaufen
von hoerspielwerkstatt - Sa 16:00
» DJI ermässigt Preis für RAW Lizenz für Inspire 3 und Ronin 4D von 999 Euro auf 1 Euro
von iasi - Sa 10:55
» F1 - offizieller Teaser Trailer
von 7River - Sa 6:57
» James Bond am Ende?
von soulbrother - Fr 21:28
» RIP - Frank Glencairn :-(
von Darth Schneider - Fr 21:26
» Professionelles Voiceover
von mikroguenni - Fr 18:54
» RTL übernimmt Sky?
von Funless - Fr 18:19
» Biete Blackmagic Micro Cinema Camera Set
von MuffinOne - Fr 13:58
» Erste Footage von Blackmagics neuer URSA Cine 17K 65 Kamera
von ruessel - Fr 10:18
» UGREEN 2-in-1 USB-C to SD / TF 4.0 Card Reader - Gut UND günstig?
von slashCAM - Fr 8:45
» Apple entwickelte spezielle iPhone-Kamera für Aufnahmen aus dem Formel 1 Cockpit
von 7River - Fr 4:04
» Sony Camera Verify Beta - Echtheitsprüfung für Fotos per C2PA-Signatur
von philr - Do 18:54
» Adobe bringt kostenlose Profi-Kamera App mit KI-Funktionen
von Axel - Do 18:54
» Dynamic Range iPhone?
von vaio - Do 18:10
» Blackmagic Pyxis Monitor - neuer 5" HDR Touchscreen mit Kamerasteuerung
von Darth Schneider - Do 16:26
» Lohnt es sich als kleiner Filmemacher Equipment zu vermieten?
von iasi - Do 16:03
» Nikon - Neue Firmware für Z50II, Z5II, Z6III und Zf
von slashCAM - Do 13:48
» Günstiger SSD-Speicher für Macs via USB oder Thunderbolt 3, 4, 5
von BigT - Do 13:18
» Was hast Du zuletzt gekauft?
von Asjaman - Do 12:01
» FUJIFILM X half simuliert Analogfotografie und filmt nur vertikal
von stip - Do 10:38