slashCAM
Administrator
Administrator
Beiträge: 11279

FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von slashCAM »


FiLMiC das Unternehmen hinter den mobilen App FiLMiC Pro hat angekündigt, dass es eine hocheffiziente Bild-Remapping-Technologie namens Cubiform patentiert hat, die 4,75-...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

im machine lerning umfeld ist ein derartiges compilieren bzw. optimierendes ausführen und zusammenfassen von operationen mit ganz ähnlich gelagerten mehrdimensionalen datenarrays (tensors) mittlerweile nichts ungewöhnliches mehr.

begonnen hat das mit halide, in tvm wurde es dann massiv ausgebaut, und mittlerweile gibt es auch noch einige weitere alternativen in den verschiedenen ML-frameworks, die ähnliches bewirken. allerdings erfolgt dort die beschleunigung weniger über LUTs als über die automatische anwendung von optimierungen bzw. umformulierung der ausführungsanweisungen, wie sie sonst hauptsächlich in übersetzungslösungen für programmiersprachen zum einsatz kommen.

mich wundert es immer wieder, dass derartiges in den heutigen videoprogrammen nicht stärker genutzt wird.



srone
Beiträge: 10474

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von srone »

der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?

oder nur alter wein in neuen schläuchen, als plugin für andere nles?

lg

srone
ten thousand posts later...



mash_gh4
Beiträge: 4716

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von mash_gh4 »

srone hat geschrieben: Mo 01 Mär, 2021 21:26 der wesentlichste faktor scheint, wie lange dauert es die "lut" zu berechnen? zb bei Leistungs-intensiven dritt-effekten, wie zb tiffen dfx - pro mist etc, ist das dann besser/schneller wie per se user-cachen in resolve?
es ist halt ein völlig anderer lösungsweg als zwischenresultate zu cachen.
ich glaube eigentlich schon, dass das in einigen fällen tatsächlich ein großes beschleunigungspotential birgt.

allgemeiner gesprochen geht es hier ja um strategien, ketten von rechenoperation zu vereinfachen bzw. in möglichst vorteilhafter weise zu zusammenzulegen (=fusion). das kann in verarbeitungspipelines, wo oft sehr viele ähnliche operationen hintereinader wiederholt werden, die sich manchmal auf wenige tatsächlich nötige rechenschritte zusammenkürzen lassen, durchaus spürbare vorteile bringen.

es ist ja nicht ganz neu, dass man derartiges mit LUTs zu bewerkstelligen versucht, nur gibt's da halt die bekannten probleme mit der oft reichlich unbefriediegenden umsetzungsgenauigkeit. anderseits wird aber auch gerne übersehen, wie problematisch sich die rundungsfehler in den ansonsten genutzten ketten von hintereinander gereihten operationen auswirken können.

im machine learning umfeld hat sich letzteres problem so gravierend ausgewirkt, das in den urspünglichen formen des deep lernings nach etwa ein-zwei dutzend berechnungsschichten die rechenfehler größer als der zusätzliche prognosegewinn war, bis plötzlich ein ganz junger forscher einen trick ausprobiert hat, überall dort, wo keine auffälligen veränderungen mehr stattfinden bzw. faktisch nur mehr identitäts-relationen vorliegen, abkürzungswege ins netz der berechnungen einzubauen. die damit erfundenen Residual neural networks haben damals eine geradezu bahnbrechende verbesserung und erweiterbarkeit einiger lernmodelle eröffnet.

gut, die berechnungen und auswirkungen von rundungsfehlern, mit denen wir es hier in praxis in unseren videoprocessing pipelines zu tun haben, sind damit natürlich nichteinmal ansatzweise vergleichbar, trotzdem handelt es sich dabei um eine problematik, die man nicht völlig außer acht lassen sollte.



TheBubble
Beiträge: 1977

Re: FiLMiCs Cubiform soll Videoeffekte deutlich beschleunigen

Beitrag von TheBubble »

Es ist kein Problem, alles mögliche über LUTs vorzuberechnen, nur leider werden sie irgendwann unglaublich groß.



 Aktuelle Beiträge [alle Foren]
 
» Greenshooting gewinnt an Bedeutung
von macaw - Mi 23:06
» Was hörst Du gerade?
von Skeptiker - Mi 22:11
» Live-Musik in Kinoqualität mit Sony FX9
von Clemens Schiesko - Mi 22:02
» DJI Flip - neue superportable Drohne mit einklappbaren Rotoren und LiDAR
von chackl - Mi 21:44
» Blackmagic URSA Cine 12K LF Sensortest - Dynamic Range und Rolling Shutter
von iasi - Mi 21:25
» Top-Handle/Cage/Griff für Sony FDR AX-700?
von manfred52 - Mi 19:07
» Was schaust Du gerade?
von berlin123 - Mi 18:55
» Neuer Vodafone-Spot ein Meilenstein? Komplett KI-generierte Bilder
von MrMeeseeks - Mi 18:54
» Weihnachtsangebote für Kameras, Objektive und mehr von Sony, Canon, Nikon, Panasonic, MSI, ...
von slashCAM - Mi 18:54
» Blick in die Vergangenheit...
von Bruno Peter - Mi 17:20
» Nexus G1 - Der BM P/L Killer oder die EINE Kamera für alle bzw. The ultimate filmmaker's cinema camera
von iasi - Mi 16:17
» Eastman Kodak investiert in seine Filmmaterial-Fabrik
von macaw - Mi 16:16
» Blackmagic PYXIS 6K: Die Vollformat „Box“-Kamera mit Viewfinder, 2x SDI, Sideplates (!) uvm.
von iasi - Mi 14:52
» Hitzeempfindlichkeit anderer Kameras (als die Sony A7IV)?
von smashcam - Mi 12:34
» Kompakte Reisekamera im Hosentaschenformat gesucht
von gunman - Mi 12:01
» Samyang AF 35mm F1.4 P FE - neue Objektivserie Prima
von slashCAM - Mi 10:42
» OpenAI gibt Sora frei - Preis: 20 oder 200 Dollar pro Monat
von rush - Mi 8:07
» Neon Idol / VR Alpträume
von darth_brush - Mi 2:24
» mietdeinobjektiv / Voundr Erfahrungen?
von Videopower - Di 22:41
» 28 Years Later - offizieller Trailer
von iasi - Di 19:10
» RØDE Wireless GO (Gen 3) jetzt mit 32-bit Float und GainAssist verfügbar
von Clemens Schiesko - Di 16:58
» Offener Brief der Initiative Fair Film an die ÖR Rundfunkanstalten
von iasi - Di 15:38
» Wie befestigt ihr HDMI-Monitore wackelfrei am Cage?
von smashcam - Di 10:31
» Sony FE 28-70 mm F2 GM - video-optimiertes Standardzoom vorgestellt
von rush - Di 6:35
» korrekte Pixelanzahl für TV und PC optimiert
von TheBubble - Mo 22:29
» Blackmagic Resolve Studio, Micro Panels und Fairlight Desktop Console 20 Prozent günstiger
von markusw - Mo 20:22
» Schreiben im Writers Room - Mit Jana Burbach
von Nigma1313 - Mo 19:33
» Welches LED-Kopflicht?
von FilmFun - Mo 16:34
» DVD zu Full HD skalieren
von Phil999 - Mo 16:32
» Sony PXW-Z200 und HXR-NX800 vorgestellt - mehr KI, mehr Streaming-Funktionen
von Motivsucher - Mo 15:48
» DJI Power Expansion Battery 2000 - erweiterbare Stromlösung für Filmemacher unterwegs
von medienonkel - Mo 15:03
» mp4-Videos schneiden, ein- aus- und überblenden ohne Qualitätsverlust
von fabchannel - Mo 13:33
» Augenblicke zwischen den Spuren
von Skeptiker - Mo 13:10
» Audiobearbeitung in Resolve/Fairlight.
von Frank Glencairn - Mo 12:46
» KURZFILME, STUDENTENOSCAR & CO. Über den Einstieg in die Filmbranche
von iasi - Mo 10:03