slashCAM
Administrator
Administrator
Beiträge: 11279

FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von slashCAM »


FiLMiC das Unternehmen hinter den mobilen App FiLMiC Pro hat angekündigt, dass es eine hocheffiziente Bild-Remapping-Technologie namens Cubiform patentiert hat, die 4,75-...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

im machine lerning umfeld ist ein derartiges compilieren bzw. optimierendes ausführen und zusammenfassen von operationen mit ganz ähnlich gelagerten mehrdimensionalen datenarrays (tensors) mittlerweile nichts ungewöhnliches mehr.

begonnen hat das mit halide, in tvm wurde es dann massiv ausgebaut, und mittlerweile gibt es auch noch einige weitere alternativen in den verschiedenen ML-frameworks, die ähnliches bewirken. allerdings erfolgt dort die beschleunigung weniger über LUTs als über die automatische anwendung von optimierungen bzw. umformulierung der ausführungsanweisungen, wie sie sonst hauptsächlich in übersetzungslösungen für programmiersprachen zum einsatz kommen.

mich wundert es immer wieder, dass derartiges in den heutigen videoprogrammen nicht stärker genutzt wird.



srone
Beiträge: 10474

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von srone »

der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?

oder nur alter wein in neuen schläuchen, als plugin für andere nles?

lg

srone
ten thousand posts later...



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

srone hat geschrieben: Mo 01 Mär, 2021 21:26 der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?
es ist halt ein völlig anderer lösungsweg als zwischenresultate zu cachen.
ich glaube eigentlich schon, dass das in einigen fällen tatsächlich ein großes beschleunigungspotential birgt.

allgemeiner gesprochen geht es hier ja um strategien, ketten von rechenoperation zu vereinfachen bzw. in möglichst vorteilhafter weise zu zusammenzulegen (=fusion). das kann in verarbeitungspipelines, wo oft sehr viele ähnliche operationen hintereinader wiederholt werden, die sich manchmal auf wenige tatsächlich nötige rechenschritte zusammenkürzen lassen, durchaus spürbare vorteile bringen.

es ist ja nicht ganz neu, dass man derartiges mit LUTs zu bewerkstelligen versucht, nur gibt's da halt die bekannten probleme mit der oft reichlich unbefriediegenden umsetzungsgenauigkeit. anderseits wird aber auch gerne übersehen, wie problematisch sich die rundungsfehler in den ansonsten genutzten ketten von hintereinander gereihten operationen auswirken können.

im machine learning umfeld hat sich letzteres problem so gravierend ausgewirkt, das in den urspünglichen formen des deep lernings nach etwa ein-zwei dutzend berechnungsschichten die rechenfehler größer als der zusätzliche prognosegewinn war, bis plötzlich ein ganz junger forscher einen trick ausprobiert hat, überall dort, wo keine auffälligen veränderungen mehr stattfinden bzw. faktisch nur mehr identitäts-relationen vorliegen, abkürzungswege ins netz der berechnungen einzubauen. die damit erfundenen Residual neural networks haben damals eine geradezu bahnbrechende verbesserung und erweiterbarkeit einiger lernmodelle eröffnet.

gut, die berechnungen und auswirkungen von rundungsfehlern, mit denen wir es hier in praxis in unseren videoprocessing pipelines zu tun haben, sind damit natürlich nichteinmal ansatzweise vergleichbar, trotzdem handelt es sich dabei um eine problematik, die man nicht völlig außer acht lassen sollte.



TheBubble
Beiträge: 2051

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von TheBubble »

Es ist kein Problem, alles mögliche über LUTs vorzuberechnen, nur leider werden sie irgendwann unglaublich groß.



 Aktuelle Beiträge [alle Foren]
 
» LaCie Rugged SSD4: Schneller und robuster Speicher für unterwegs vorgestellt
von slashCAM - Do 14:33
» SmallRig X-Touch X221: V-Mount Akku mit IP54, Touchscreen und App-Kontrolle
von slashCAM - Do 11:30
» DJI Mini 5 Pro bringt grossen 1" Sensor, LiDAR und 4K mit 120fps
von Jott - Do 6:04
» Kinefinity Eagle-EVF erhält u.a. Log-to-Rec.709 Vorschau
von UWCine - Mi 21:31
» Viltrox wird Mitglied der L-Mount Alliance
von cantsin - Mi 20:00
» Die Canon EOS C50 erklärt - 7K RAW, 120p 4K und Open Gate
von pillepalle - Mi 16:08
» Revolutionärer AF für Cine-Objektive: Tilta Autofokus-Adapter zapft interne Kamera-AF-Daten an
von pillepalle - Mi 15:32
» Das gesamte aktuelle Z-Cam Lineup ausführlich erklärt
von Rick SSon - Mi 13:53
» Sigma Cine-Zoom 28-45mm T2 FF demnächst für 2.999 Euro erhältlich
von rudi - Mi 13:23
» Weniger Mikros sind mehr
von acrossthewire - Mi 9:52
» Blackmagic DaVinci Resolve 20.2 bringt neben Apple ProRes RAW u.a. benutzerdefinierte Metadaten
von freezer - Di 17:31
» Asus ProArt P16 mit AMD Ryzen AI 9 HX 370 CPU und RTX 5090 vorgestellt
von tom - Di 16:35
» Google Veo 3 und Veo 3 Fast: Neue Features, 1080p-Support und drastische Preissenkung
von slashCAM - Di 16:24
» Blackmagic unterstützt Apple ProRes RAW - nicht nur in Resolve
von Darth Schneider - Di 12:07
» Nanlux Evoke 150C + 600C Spotlight erklärt: Größtes Farbspektrum ihrer Klasse?
von slashCAM - Di 8:27
» Verschiedene Kameramodelle & Aufnahmeformate für Familienfeier vereinen
von Jott - Di 5:55
» Fujifilm GMX Eterna 55 erklärt: Aufnahmeformate, Großformat-Open-Gate, Fujinon 32-90
von Darth Schneider - Mo 19:41
» Was kommt, wenn die Gletscher verschwinden?
von Jott - Mo 19:12
» SmallRig Tribex Monopod, iPhone 17 Cages + High Capacity 221 Wh Akku erklärt
von slashCAM - Mo 9:51
» Magic Lantern mit deutlichem Lebenszeichen - Frische Motivation und frischer Code
von Walter Schulz - Mo 8:42
» RØDE senkt Preise für seine RØDE Wireless Mikrofonsysteme radikal
von Darth Schneider - Mo 8:14
» BRAW für Sony Kameras Sony FX3/FX3A, FX30, FX6 & FX9
von rush - So 21:33
» Erfahrungen mit vibrationsgedämpften Kamerabefestigungen an Motorrädern
von iasi - So 21:27
» ARRI soll (Teil)Verkauf erwägen
von iasi - So 19:41
» Ambient Lockit BT
von pillepalle - So 18:42
» Biete Sony Set FS7 Komplettset mit 28135G XDCA etc
von michael_zimmer - So 18:25
» Canon Legria HF G40 Camcorder mit Wide DR // CES 2016
von Jan - So 17:46
» Vimeo wird vom Investor Bending Spoons übernommen
von cantsin - So 17:13
» Fujifilm GFX Eterna 55 demnächst verfügbar für 16.500 Dollar
von Jott - So 16:05
» Edius 11.40 auf der IBC vorgestellt
von Bruno Peter - So 10:28
» Sachtler aktiv16T/18T und FSB 16T/18T Mk II Fluidköpfe vorgestellt
von pillepalle - So 1:45
» Neue Vocas Matte Box MB-260 - kompakt und frei konfigurierbar
von slashCAM - Sa 18:45
» ATOMOSphere erhält mobile Oberfläche und Transkriptionsfunktion
von slashCAM - Sa 12:51
» Blackmagic Camera App 3.0 für Android und iOS bringt viele Neuerungen
von Axel - Sa 11:32
» BPCC6Kpro mit ipad 10 verbinden
von coldcase - Fr 23:51