slashCAM
Administrator
Administrator
Beiträge: 11279

FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von slashCAM »


FiLMiC das Unternehmen hinter den mobilen App FiLMiC Pro hat angekündigt, dass es eine hocheffiziente Bild-Remapping-Technologie namens Cubiform patentiert hat, die 4,75-...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

im machine lerning umfeld ist ein derartiges compilieren bzw. optimierendes ausführen und zusammenfassen von operationen mit ganz ähnlich gelagerten mehrdimensionalen datenarrays (tensors) mittlerweile nichts ungewöhnliches mehr.

begonnen hat das mit halide, in tvm wurde es dann massiv ausgebaut, und mittlerweile gibt es auch noch einige weitere alternativen in den verschiedenen ML-frameworks, die ähnliches bewirken. allerdings erfolgt dort die beschleunigung weniger über LUTs als über die automatische anwendung von optimierungen bzw. umformulierung der ausführungsanweisungen, wie sie sonst hauptsächlich in übersetzungslösungen für programmiersprachen zum einsatz kommen.

mich wundert es immer wieder, dass derartiges in den heutigen videoprogrammen nicht stärker genutzt wird.



srone
Beiträge: 10474

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von srone »

der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?

oder nur alter wein in neuen schläuchen, als plugin für andere nles?

lg

srone
ten thousand posts later...



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

srone hat geschrieben: Mo 01 Mär, 2021 21:26 der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?
es ist halt ein völlig anderer lösungsweg als zwischenresultate zu cachen.
ich glaube eigentlich schon, dass das in einigen fällen tatsächlich ein großes beschleunigungspotential birgt.

allgemeiner gesprochen geht es hier ja um strategien, ketten von rechenoperation zu vereinfachen bzw. in möglichst vorteilhafter weise zu zusammenzulegen (=fusion). das kann in verarbeitungspipelines, wo oft sehr viele ähnliche operationen hintereinader wiederholt werden, die sich manchmal auf wenige tatsächlich nötige rechenschritte zusammenkürzen lassen, durchaus spürbare vorteile bringen.

es ist ja nicht ganz neu, dass man derartiges mit LUTs zu bewerkstelligen versucht, nur gibt's da halt die bekannten probleme mit der oft reichlich unbefriediegenden umsetzungsgenauigkeit. anderseits wird aber auch gerne übersehen, wie problematisch sich die rundungsfehler in den ansonsten genutzten ketten von hintereinander gereihten operationen auswirken können.

im machine learning umfeld hat sich letzteres problem so gravierend ausgewirkt, das in den urspünglichen formen des deep lernings nach etwa ein-zwei dutzend berechnungsschichten die rechenfehler größer als der zusätzliche prognosegewinn war, bis plötzlich ein ganz junger forscher einen trick ausprobiert hat, überall dort, wo keine auffälligen veränderungen mehr stattfinden bzw. faktisch nur mehr identitäts-relationen vorliegen, abkürzungswege ins netz der berechnungen einzubauen. die damit erfundenen Residual neural networks haben damals eine geradezu bahnbrechende verbesserung und erweiterbarkeit einiger lernmodelle eröffnet.

gut, die berechnungen und auswirkungen von rundungsfehlern, mit denen wir es hier in praxis in unseren videoprocessing pipelines zu tun haben, sind damit natürlich nichteinmal ansatzweise vergleichbar, trotzdem handelt es sich dabei um eine problematik, die man nicht völlig außer acht lassen sollte.



TheBubble
Beiträge: 2017

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von TheBubble »

Es ist kein Problem, alles mögliche über LUTs vorzuberechnen, nur leider werden sie irgendwann unglaublich groß.



 Aktuelle Beiträge [alle Foren]
 
» FUJIFILM X half simuliert Analogfotografie und filmt nur vertikal
von cantsin - Fr 7:26
» Sony FX2 im Praxistest: Erstmalig neigbarer Sucher, Cine-Gehäuse wie FX3, 33 MP Fullframe CMOS
von pillepalle - Fr 7:18
» Panasonic S1RII im Praxistest: Überraschend viele Videofunktionen für Pros
von iasi - Fr 0:18
» Blackmagic Updates für Web Presenter, Video Assist, Cloud und BRAW
von slashCAM - Do 11:27
» Adobe Premiere Pro ab sofort mit 4:2:2 Beschleunigung per Nvidia GPU und mehr
von dienstag_01 - Do 11:03
» Tentacle Sync - Music Video Sync App
von pillepalle - Do 9:48
» Superman | Offizieller Trailer
von 7River - Do 5:11
» Midjourney startet eigene Video-KI V1
von slashCAM - Do 1:09
» DJI RS4 Pro und LiDAR: Bestes AF/Tracking (inkl. Stabilisierung) für Cine-Setups?
von pillepalle - Mi 23:45
» Sigma 17-40mm F1.8 DC | Art für APS-C vorgestellt u.a. mit RF-Mount
von iasi - Mi 23:24
» SIRUI Reparaturen/Customer Service Germany
von gizmotronic - Mi 18:47
» RS4 mit XR AR Brillen als Videomonitor möglich?
von Silentsnoop - Mi 18:45
» Sony Alpha 6700 S-Cinetone überbelichtet
von cantsin - Mi 18:02
» Fujifilm X-E5 vorgestellt mit 40MP, IBIS, 6,2K Video - und deutlich teurer
von cantsin - Mi 14:07
» DaVinci Resolve 18 +++ Projekt.db wird nicht erkannt
von Jasper - Mi 11:39
» Verständnisfrage: MOV/MP4 H.264/H.265 Formate der S5/S5II für die Bearbeitung mit neuer Grafikkarte B580 (H.265 Decode)
von blueplanet - Mi 11:37
» Deutsche Redakteure austricksen! mit JOSEPH BOLZ
von Nigma1313 - Mi 11:08
» Sony FX2 Sensor-Bildqualität - Debayering, Rolling Shutter und Dynamik
von Alex - Mi 7:25
» Nikon Z6 III - Sensor-Bildqualität, Rolling Shutter, Dynamik - Günstige Z8 für Filmer?
von cantsin - Di 22:10
» 3 Audios bei einem Dreh WIE?
von Blackbox - Di 21:56
» Mocha Pro 2025.5 Update mit Facetracking, neuem 3D-Snap-Tool und mehr
von freezer - Di 19:29
» Kommt N-Log2 demnächst in Nikon Z9 / Z8 / Z6III / ZF Kameras?
von stip - Di 13:57
» Software zur Kamera HDC-SD600
von MLJ - Di 11:13
» KI-Werbespot für 2.000 Dollar im GTA Stil läuft zur TV-Hauptsendezeit
von 7River - Di 7:04
» RUHE bewahren am Set - Mit Shawn Bu
von Nigma1313 - Di 0:53
» NoScribe
von beiti - Mo 21:04
» Meta bietet kostenlose KI-Videoeffekte (VFX) an
von iasi - Mo 19:16
» Lumix S5 für Fotos und 4k Video ? Autofokus
von Darth Schneider - Mo 16:18
» Huawei Pura 80 Ultra erweitert das Smartphone-Tele mit beweglichem Prisma
von iasi - Mo 10:53
» Günstiges Zoomobjektiv für No-Budget-Dokus
von Tscheckoff - Mo 10:22
» Making-of des Gewinnerclips - Schnitt, Musik, Grading
von Helikopter - So 21:52
» RIP - Frank Glencairn :-(
von philr - So 17:03
» MSI Vector 17 HX AI A2XWIG-040 - Mobile Windows-Gaming-Workstation mit RTX 5080 im Resolve-Test
von markusG - So 9:30
» Sony Burano - Firmware 2.0 und Videotutorialserie verfügbar
von TomStg - Fr 22:43
» Kompakte Fujifilm GFX100RF Mittelformatkamera mit Festoptik vorgestellt
von rush - Fr 21:33