slashCAM
Administrator
Administrator
Beiträge: 11262

FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von slashCAM »


FiLMiC das Unternehmen hinter den mobilen App FiLMiC Pro hat angekündigt, dass es eine hocheffiziente Bild-Remapping-Technologie namens Cubiform patentiert hat, die 4,75-...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

im machine lerning umfeld ist ein derartiges compilieren bzw. optimierendes ausführen und zusammenfassen von operationen mit ganz ähnlich gelagerten mehrdimensionalen datenarrays (tensors) mittlerweile nichts ungewöhnliches mehr.

begonnen hat das mit halide, in tvm wurde es dann massiv ausgebaut, und mittlerweile gibt es auch noch einige weitere alternativen in den verschiedenen ML-frameworks, die ähnliches bewirken. allerdings erfolgt dort die beschleunigung weniger über LUTs als über die automatische anwendung von optimierungen bzw. umformulierung der ausführungsanweisungen, wie sie sonst hauptsächlich in übersetzungslösungen für programmiersprachen zum einsatz kommen.

mich wundert es immer wieder, dass derartiges in den heutigen videoprogrammen nicht stärker genutzt wird.



srone
Beiträge: 10474

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von srone »

der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?

oder nur alter wein in neuen schläuchen, als plugin für andere nles?

lg

srone
ten thousand posts later...



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

srone hat geschrieben: Mo 01 Mär, 2021 21:26 der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?
es ist halt ein völlig anderer lösungsweg als zwischenresultate zu cachen.
ich glaube eigentlich schon, dass das in einigen fällen tatsächlich ein großes beschleunigungspotential birgt.

allgemeiner gesprochen geht es hier ja um strategien, ketten von rechenoperation zu vereinfachen bzw. in möglichst vorteilhafter weise zu zusammenzulegen (=fusion). das kann in verarbeitungspipelines, wo oft sehr viele ähnliche operationen hintereinader wiederholt werden, die sich manchmal auf wenige tatsächlich nötige rechenschritte zusammenkürzen lassen, durchaus spürbare vorteile bringen.

es ist ja nicht ganz neu, dass man derartiges mit LUTs zu bewerkstelligen versucht, nur gibt's da halt die bekannten probleme mit der oft reichlich unbefriediegenden umsetzungsgenauigkeit. anderseits wird aber auch gerne übersehen, wie problematisch sich die rundungsfehler in den ansonsten genutzten ketten von hintereinander gereihten operationen auswirken können.

im machine learning umfeld hat sich letzteres problem so gravierend ausgewirkt, das in den urspünglichen formen des deep lernings nach etwa ein-zwei dutzend berechnungsschichten die rechenfehler größer als der zusätzliche prognosegewinn war, bis plötzlich ein ganz junger forscher einen trick ausprobiert hat, überall dort, wo keine auffälligen veränderungen mehr stattfinden bzw. faktisch nur mehr identitäts-relationen vorliegen, abkürzungswege ins netz der berechnungen einzubauen. die damit erfundenen Residual neural networks haben damals eine geradezu bahnbrechende verbesserung und erweiterbarkeit einiger lernmodelle eröffnet.

gut, die berechnungen und auswirkungen von rundungsfehlern, mit denen wir es hier in praxis in unseren videoprocessing pipelines zu tun haben, sind damit natürlich nichteinmal ansatzweise vergleichbar, trotzdem handelt es sich dabei um eine problematik, die man nicht völlig außer acht lassen sollte.



TheBubble
Beiträge: 1910

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von TheBubble »

Es ist kein Problem, alles mögliche über LUTs vorzuberechnen, nur leider werden sie irgendwann unglaublich groß.



 Aktuelle Beiträge [alle Foren]
 
» Was werden KI-Videogeneratoren wie Open AI Sora im kommerziellen Einsatz kosten?
von Knutinho - Mo 15:36
» 2 Videokameras in einen Bild zusammenführen
von Puggler23 - Mo 10:41
» Frage zu Outlook Account
von klusterdegenerierung - Mo 9:08
» Deutsche Komödie - CHANTAL IM MÄRCHENLAND - hat den jemand gesehen?
von 7River - So 20:41
» US-Gericht bestätigt: Kein Urheberrecht auf KI-generierte Kunst
von Alex - So 16:32
» Resolve oder andere - Bewegtbild aus Standbild
von dienstag_01 - So 14:39
» NiSi Athena Cine-Objektive zwischen 14mm und 85mm vorgestellt
von Bildlauf - So 13:33
» MacBook Air M3 13" im Performance-Test mit Arri, Sony, Panasonic, Canon und Blackmagic
von R S K - So 13:07
» Apple Mac Mini M2 - Bester Low-Budget 4K-Schnittrechner für 600 Euro?
von iasi - Sa 23:47
» Nikon Z6 Mark III
von iasi - Sa 23:11
» Fokus-Einstellung bei Panasonic HC-X2
von Darth Schneider - Sa 21:02
» Lexar CFexpress Typ A 320GB neu versiegelt Silber Karte f. Sony FX3 FX30 A7Siii CF express
von Alex - Sa 18:44
» LSST Astro-Kamera fotografiert mit 3.200 Megapixel Auflösung
von slashCAM - Sa 13:36
» OLPF-Nachrüstung für S5ii/S5iix/S5/S1
von Bildlauf - Fr 20:04
» Objekt entfernen
von Alex - Fr 19:44
» DUNE !
von markusG - Fr 14:16
» ARRI L-Series Plus - weiterentwickelte LED-Fresnels
von slashCAM - Fr 14:00
» Hamburger Fotomesse Photopia wird eingestellt und findet 2024 nicht mehr statt
von Alex - Fr 13:42
» ALLES SCHROTT? - Können deutsche Filmemacher international mithalten? Interview mit Hannu Salonen
von iasi - Fr 12:24
» Sachtler Ace M / XL Mk II Fluidköpfe aktualisiert
von Tscheckoff - Fr 9:30
» Vision Pro Focus Pulling
von macaw - Fr 9:12
» Unreal bekommt Konkurrenz in der Virtual Production
von Frank Glencairn - Fr 8:16
» Blackmagic Cinema Camera 6K im Praxistest inkl. anamorphotischer Aufnahmen (DZO Pavo)
von roki100 - Do 18:46
» Homevideo-Content 2023 - 131,- EUR Umsatz pro Person
von ruessel - Do 16:19
» NiSi Athena - drei neue Cine-Objektive vorgestellt
von slashCAM - Do 15:36
» Verdoppelte Leistung durch zwei M3 Ultra Chips per UltraFusion?
von philr - Do 15:22
» All-in-One Lösung - Von der Idee zum KI-Film in Minuten
von Drushba - Do 14:15
» Micro Mirrorless Kamera - Actioncam ohne Action, aber mit Wechseloptik
von medienonkel - Do 11:08
» Foodfotografen bald auch uninteressant?
von MK - Mi 21:37
» FCPX/Motion, DaVinci/Fusion... Tipps&Tricks
von roki100 - Mi 20:43
» DJIs FPV-Drohne Avata 2 kommt am 11. April
von slashCAM - Mi 18:06
» NAB Rumors 2024
von Darth Schneider - Mi 13:00
» LLM Agenten von Apple?
von Frank Glencairn - Mi 8:49
» Video Pro X stürzt beim Multi Cam Schnitt ab
von MK - Di 21:42
» Coppola’s “Megalopolis” hatte seine erste Aufführung
von iasi - Di 20:29