slashCAM
Administrator
Administrator
Beiträge: 11279

FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von slashCAM »


FiLMiC das Unternehmen hinter den mobilen App FiLMiC Pro hat angekündigt, dass es eine hocheffiziente Bild-Remapping-Technologie namens Cubiform patentiert hat, die 4,75-...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

im machine lerning umfeld ist ein derartiges compilieren bzw. optimierendes ausführen und zusammenfassen von operationen mit ganz ähnlich gelagerten mehrdimensionalen datenarrays (tensors) mittlerweile nichts ungewöhnliches mehr.

begonnen hat das mit halide, in tvm wurde es dann massiv ausgebaut, und mittlerweile gibt es auch noch einige weitere alternativen in den verschiedenen ML-frameworks, die ähnliches bewirken. allerdings erfolgt dort die beschleunigung weniger über LUTs als über die automatische anwendung von optimierungen bzw. umformulierung der ausführungsanweisungen, wie sie sonst hauptsächlich in übersetzungslösungen für programmiersprachen zum einsatz kommen.

mich wundert es immer wieder, dass derartiges in den heutigen videoprogrammen nicht stärker genutzt wird.



srone
Beiträge: 10474

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von srone »

der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?

oder nur alter wein in neuen schläuchen, als plugin für andere nles?

lg

srone
ten thousand posts later...



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

srone hat geschrieben: ↑Mo 01 Mär, 2021 21:26 der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?
es ist halt ein völlig anderer lösungsweg als zwischenresultate zu cachen.
ich glaube eigentlich schon, dass das in einigen fällen tatsächlich ein großes beschleunigungspotential birgt.

allgemeiner gesprochen geht es hier ja um strategien, ketten von rechenoperation zu vereinfachen bzw. in möglichst vorteilhafter weise zu zusammenzulegen (=fusion). das kann in verarbeitungspipelines, wo oft sehr viele ähnliche operationen hintereinader wiederholt werden, die sich manchmal auf wenige tatsächlich nötige rechenschritte zusammenkürzen lassen, durchaus spürbare vorteile bringen.

es ist ja nicht ganz neu, dass man derartiges mit LUTs zu bewerkstelligen versucht, nur gibt's da halt die bekannten probleme mit der oft reichlich unbefriediegenden umsetzungsgenauigkeit. anderseits wird aber auch gerne übersehen, wie problematisch sich die rundungsfehler in den ansonsten genutzten ketten von hintereinander gereihten operationen auswirken können.

im machine learning umfeld hat sich letzteres problem so gravierend ausgewirkt, das in den urspünglichen formen des deep lernings nach etwa ein-zwei dutzend berechnungsschichten die rechenfehler größer als der zusätzliche prognosegewinn war, bis plötzlich ein ganz junger forscher einen trick ausprobiert hat, überall dort, wo keine auffälligen veränderungen mehr stattfinden bzw. faktisch nur mehr identitäts-relationen vorliegen, abkürzungswege ins netz der berechnungen einzubauen. die damit erfundenen Residual neural networks haben damals eine geradezu bahnbrechende verbesserung und erweiterbarkeit einiger lernmodelle eröffnet.

gut, die berechnungen und auswirkungen von rundungsfehlern, mit denen wir es hier in praxis in unseren videoprocessing pipelines zu tun haben, sind damit natürlich nichteinmal ansatzweise vergleichbar, trotzdem handelt es sich dabei um eine problematik, die man nicht völlig außer acht lassen sollte.



TheBubble
Beiträge: 2055

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von TheBubble »

Es ist kein Problem, alles mögliche über LUTs vorzuberechnen, nur leider werden sie irgendwann unglaublich groß.



 Aktuelle Beiträge [alle Foren]
 
» LOG-Frage
von dienstag_01 - Mi 20:05
» Canon Cinema EOS C50 Sensor-Bildqualität - Debayering, Rolling Shutter und Dynamik
von pillepalle - Mi 18:14
» SmallRig stellt aufsteckbares M3 LED Licht für Smartphones und Laptops vor
von slashCAM - Mi 12:12
» Blackmagic DaVinci Resolve 20.2.2 verbessert Farbmanagement und behebt Bugs
von slashCAM - Mi 9:51
» Welche kammera und welches mikrophone für den PC?
von walang_sinuman - Mi 7:59
» Sony A7IV, Sigma 24-70 f2.8 (E), Pyxis 6K, Dulens Cine Primes und Zubehör
von Sevenz - Di 18:46
» Import ohne automatische Schnitterkennung
von Jott - Di 18:31
» Import ohne automatische Schnitterkennung
von R S K - Di 18:25
» Portkeys LH7P vs Viltrox DC-A1
von Clemens Schiesko - Di 16:56
» Nikon ZR - wie geht es weiter? Nikon ZR8, Nikon ZR9? Was wir gerne sehen würden ...
von iasi - Di 15:12
» CASTING & CO: Wie Schauspieler an ihre Rollen kommen (oder nicht)
von Nigma1313 - Di 15:09
» Neue DJI Osmo Action 4 - ein paar Fragen dazu.
von nicecam - Di 10:57
» Blackmagic DaVinci Resolve Studio gibt es gerade rund 45 Euro billiger
von slashCAM - Di 9:39
» Portkeys LH7P wackliger Stromanschluss?
von smashcam - Mo 21:01
» Sony a7IV mit zwei Rec-Handles betreiben?
von smashcam - Mo 20:44
» Low Budget meets KI - Neues Musikvideo
von tehaix - Mo 16:19
» Diskussion: Welches Licht ist das beste Licht für Video/Fim?
von Jominator - Mo 15:14
» Blackmagic Camera App 3.1.2 für iOS inkl. Open Gate Aufnahme erschienen
von Axel - Mo 14:58
» SONY A 7 II Videoqualität verwaschen
von cantsin - So 23:40
» Kostenbescheid für kleinen Drohnenführerschein aufgehoben
von slashCAM - So 12:24
» Samsung und Valve bringen frische Headsets, Apple setzt auf Smart Glasses
von slashCAM - Sa 16:27
» Stoffideen pitchen! Welche Stoffe sucht die CONSTANTIN FILM?
von iasi - Sa 16:05
» Bright Tangerine baut kostengünstige Create Serie aus: Schulter-Rig, Baseplate ...
von slashCAM - Sa 11:30
» KI-Charakter Tilly Norwood - eine Schauspielerin?
von Da_Michl - Sa 10:24
» AV1 als Streaming-Codec für selbstgehostete Videos (und für archive.org)
von cantsin - Sa 9:59
» Teleskopstab für Skiaufnahmen
von Schaedel - Fr 21:16
» Konferenz auf Zoom streamen
von Jott - Fr 20:03
» PROKRASTINATION UND WIE MAN SIE ÜBERWINDET! mit Florian Tessloff
von Nigma1313 - Fr 19:04
» Affinity Photo, Designer und Publisher - iPad Versionen aktuell kostenlos
von freezer - Fr 18:27
» DJI Mavic 4 Pro Update bringt Kamerawechsel während der Aufnahme und mehr
von slashCAM - Fr 14:42
» Nosferatu
von Axel - Fr 12:37
» SCHLECHTES Drehbuch - GUTES Schauspiel?
von Nigma1313 - Do 19:54
» Kipon Iberit 75mm 2.4 Tele-Objektiv für Fuji-X
von thchki - Do 19:54
» **BIETE** SACHTLER FLOWTEC 75 mit Ace XL
von ksingle - Do 18:06
» Leica M11-V mit elektronischem Sucher im Anflug? V für Viewfinder (und Video)?
von rob - Do 16:33