slashCAM
Administrator
Administrator
Beiträge: 11262

Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von slashCAM »


Nvidia hat mit der RTX Broadcast Engine eine interessante Lösung für Live-Streamer vorgestellt, die mittels KI-Algorithmen auf GPUs mit Tensorkernen ein paar nette Videoe...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker



R S K
Beiträge: 2271

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von R S K »

iPhone Features endlich auch am Rechner! 😄

Ich tippe mal, dass das nur ein simpler „Difference”-Key ist. Sieht jedenfalls danach aus und ist natürlich nicht gerade revolutionär. Und sonderlich doll aussehen tut's natürlich auch nicht. Das iPhone (und vermutlich andere?) konnte das schon mit dem iPhone… 4? 5? Und Face-Tracking, naja… wissen wir ja. ;) Und, wie auch erwähnt, auch der Adobe „Character Studio”, dass das bekanntermaßen schon ewig auf reiner Softwarebasis kann, wenn vermutlich nicht ganz so gut wie die RTX (wäre ja sonst peinlich).

Für Gamer und Amazon-Greenscreen-Käufer sicherlich ganz lustig. Aber darüber hinaus? 🤷🏼‍♂️

- RK
Zuletzt geändert von R S K am So 13 Okt, 2019 10:20, insgesamt 1-mal geändert.



pillepalle
Beiträge: 8413

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von pillepalle »

"Eines der interessantesten Features ist dagegen der RTX Greenscreen, welcher den Hintergrund von einem menschlichen Moderator trennen kann, ohne dass der Hintergrund irgendwie "grün" sein müsste."

Dafür tragt der Moderator in dem Beispiel das Greenscreen T-Shirt :) Der Hintergrund sieht so unnatürlich entsättigt aus... aber in ein paar Jahren funktioniert das vielleicht auch mit realen Motiven.

VG
Meine Lieblingsfilme:
Es war ein Mahl in Amerika
Molkerei auf der Bounty
Dune - Der Würstchenplanet



roki100
Beiträge: 15064

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von roki100 »

also auf jeden Fall viel viel besser als Greenscreen + 8 Bit Kamera. Außerdem ist das schon eine andere Technologie als das von iPhone usw.
"Deine Zeit ist begrenzt. Verschwende sie nicht damit, das Leben eines Anderen zu leben"
(Steve Jobs)



CameraRick
Beiträge: 4806

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von CameraRick »

Also ein Difference Key ist das mit Sicherheit nicht, davon lässt sich mal ausgehen, ergibt für die Anwendung auch keinen Sinn. Da bräuchte es ja ne Cleanplate für, die ist in Echtzeit doch recht schwer zu beschaffen.
Ich glaub für die gezeigte Anwendung, Streaming auf Twitch und co, ist das total in Ordnung; die Kanten sind aber einfach so schlecht und soft, produktionstauglich ist das hinten und vorne nicht (selbst für Sparten-TV-Sender wäre das nicht ausreichend). Sieht aber auch nicht so aus, als ob es das sein will.
Nun kann man lange darüber debattieren ob das irgendwann mal tauglich wird, aber allein wegen Motionblur, Haar-Details und Hintergrundelemente die in den Vordergrund bluten glaube ich nicht so recht daran, dass wir grüne und blaue Hintergründe in der nächsten Dekade verlieren werden.
ich schreibe hier nur in pausen auf der arbeit.



CandyNinjas
Beiträge: 121

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von CandyNinjas »

CameraRick hat geschrieben: So 13 Okt, 2019 11:50 Ich glaub für die gezeigte Anwendung, Streaming auf Twitch und co, ist das total in Ordnung; die Kanten sind aber einfach so schlecht und soft, produktionstauglich ist das hinten und vorne nicht (selbst für Sparten-TV-Sender wäre das nicht ausreichend). Sieht aber auch nicht so aus, als ob es das sein will.
Klar, für Streamer geht das in Ordnung. Vor Allem weil man null Arbeit hat und nicht mal eine Greenscreen braucht.

Aber die Qualität reicht meiner Meinung für sonst NIX.



CandyNinjas
Beiträge: 121

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von CandyNinjas »

Richtig gut sieht das Facetracking aus. Wenn man bedenkt, daß da nur die Daten einer Webcam zum Tracking bereitstehen, ist das schon sehr beeindruckend.



R S K
Beiträge: 2271

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von R S K »

CameraRick hat geschrieben: So 13 Okt, 2019 11:50Also ein Difference Key ist das mit Sicherheit nicht, davon lässt sich mal ausgehen, ergibt für die Anwendung auch keinen Sinn. Da bräuchte es ja ne Cleanplate für, die ist in Echtzeit doch recht schwer zu beschaffen.
Es wird genauso gemacht wie mit dem iPhone und sonstigen Apps. Man bewegt sich kurz aus dem Bild, die App macht eine Clean, du kommst wieder rein, fertig. Ist wahrlich keine Raketenwissenschaft. 🙄 Wird auch der Grund sein warum sich die Kamera nicht bewegt bzw. wird entsprechend auch nicht mit einer bewegten Kamera funktionieren. Würde mich jedensfalls sehr wundern, vor allem wo es sicherlich eben nur für genau solche Webcam Szenarien ausgelegt/gedacht sein wird.

- RK



rainermann
Beiträge: 1722

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von rainermann »

Mal abgesehen vom Facetracking gibt's das auch schon seit Jahren in Photo Booth vom Mac. Damit hab ich vor Jahren schon Blödsinn mit meinen Kids gemacht. Wie RSK richtig erklärte, genauso geht's. Nix neues (für Mac User).



R S K
Beiträge: 2271

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von R S K »

rainermann hat geschrieben: So 13 Okt, 2019 14:09Mal abgesehen vom Facetracking gibt's das auch schon seit Jahren in Photo Booth vom Mac.
Stimmt. Die Hintergrund Key Sache gab's das auch mal! Wie auch in iMessage, als es noch iChat hieß, was man sogar mit Plugins erweitern konnte (Flammen aus den Augen und solche Späße). Seltsam wie die manche Sachen wieder RAUSbauen. 🤨



Was das Facetracking angeht: also bitte… sogar Snapchat kann das, auch wenn es nicht ganz so ausgereift sein wird. Aber ohne Hardware wiederum auch nicht unbedingt.

Ich denke mal ein iPhone mit „Dot Projector” wird da noch um einiges besser/präziser sein.



Gibt auch Apps die es ohne FaceID können.

Fazit: bestimmt „fun to have” Feature, aber eine Meldung wert? 🤷🏼‍♂️

- RK
Zuletzt geändert von R S K am So 13 Okt, 2019 14:47, insgesamt 1-mal geändert.



Jott
Beiträge: 21802

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von Jott »

roki100 hat geschrieben: So 13 Okt, 2019 10:33 also auf jeden Fall viel viel besser als Greenscreen + 8 Bit Kamera.
Der Bullenkot des Tages! :-)



roki100
Beiträge: 15064

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von roki100 »

8Bit 420 und Greenscreen ist eben ganz ganz schlecht...soooo richtig schlimm wie iPhone mit irgendwelche VFX Kamera Effekte ;) Nur Nvidia kann das, Apple nicht.... uff jetzt gibt es aber Geheule ;)
"Deine Zeit ist begrenzt. Verschwende sie nicht damit, das Leben eines Anderen zu leben"
(Steve Jobs)



Jott
Beiträge: 21802

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von Jott »

Altes Märchen. Wenn die Ausleuchtung stimmt, geht das mit einer gescheiten Kamera wie zum Beispiel der FS5 perfekt. Und wenn die Software was taugt. Es leuchtet halt kaum jemand richtig aus. Ist das aber der Fall, dann ist der 8Bit-Key insbesondere bei Aufnahme in 4K/UHD und Schnitt in HD-Timeline (dann 10 Bit) völlig in Ordnung bis hin zum feinsten Härchen.

Man kann theoretisieren oder einfach mal machen. 8Bit = geht nicht ist Stammtischgetue, sorry!



roki100
Beiträge: 15064

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von roki100 »

wir inkl. iasi und alle 10+Bitler und RAWler, brauchen kein Licht ;) Und OpenSource'ler brauchen auch keine Nvidia RTX oder Apple, sondern nur OpenCV, kinect und ein paar Zeilen Scripts ;)
"Deine Zeit ist begrenzt. Verschwende sie nicht damit, das Leben eines Anderen zu leben"
(Steve Jobs)



pillepalle
Beiträge: 8413

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von pillepalle »

Stimmt... für's Theoretisieren braucht's kein Licht ;)

VG
Meine Lieblingsfilme:
Es war ein Mahl in Amerika
Molkerei auf der Bounty
Dune - Der Würstchenplanet



rainermann
Beiträge: 1722

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von rainermann »

Jott hat geschrieben: So 13 Okt, 2019 20:09 8Bit = geht nicht ist Stammtischgetue, sorry!
Jupp. Hab u.a. schon 2 größere Musikvideos mit viel Greenscreen-Gewummel in 8bit gedreht. Und dazu noch grober Nikon-DSLR-800-HD-Codec ohne LOG und RAW. Würg. Nur so nach (geschultem) Auge, Licht (z.T. nur Sonne) und FCPX, sonst nix. Geht alles. RTL2 hat's gefallen, von den anderen gab's Folgejobs. Klar, mit Red und Raw (oder natürlich auch FS7 und 10bit) wär's perfekter geworden, aber war nie das Thema oder ein Problem.
Wie schon geschrieben, mit Licht und richtigem Setting geht vieles auch ohne viel (damals, 2013 rum) teure Technik.



macaw
Beiträge: 1157

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von macaw »

rainermann hat geschrieben: So 13 Okt, 2019 21:16
Jott hat geschrieben: So 13 Okt, 2019 20:09 8Bit = geht nicht ist Stammtischgetue, sorry!
Jupp. Hab u.a. schon 2 größere Musikvideos mit viel Greenscreen-Gewummel in 8bit gedreht.
War das für Red Hot Chili Peppers oder doch nur Madonna? ;)



rainermann
Beiträge: 1722

Re: Nvidia zeigt Echtzeit Greenscreen Keyer ohne Greenscreen sowie Facetracker

Beitrag von rainermann »

Nö. Für mich ist alles "größer", wenn's dafür gut Geld gibt ;)
Oder im TV läuft. Ausserdem meinte ich in dem Fall "größer" eher als "schwäbischer Slang" im Sinne von aufwendiger, mehrere Ebenen etc.
War das hier:
viewtopic.php?f=33&t=125990&p=803599&hi ... oe#p803599
(mit kleinem MakingOf)

Madonna hab ich abgelehnt, wollte daß ich umsonst drehe. Spinnt ja.



 Aktuelle Beiträge [alle Foren]
 
» Neues SIGMA 50mm F1,2 DG DN | Art Objektiv wiegt 745g
von pillepalle - Do 13:24
» Tieraufnahmen mit dem MKE600 + H1 Essential rauschen
von DKPost - Do 13:20
» Panasonic S5 - Allgemeine Fragen, Tipps und Tricks, Zeig deine Bilder/Videos usw.
von Darth Schneider - Do 13:11
» AOC bringt 44.5" OLED-Riesenmonitor mit 98.5% DCI-P3
von MK - Do 12:07
» Adobe führt die neue Funktion "Structure Reference" in Firefly ein
von slashCAM - Do 10:54
» Sondergagen - Wer aufmuckt, wird nicht mehr besetzt
von stip - Do 9:49
» Was schaust Du gerade?
von Frank Glencairn - Do 9:00
» Nikon stellt NIKKOR Z 28-400mm f/4-8 VR Superzoom-Objektiv vor
von rush - Do 8:51
» Exhuma - die Südkoreaner können erfolgreiche Filme drehen
von -paleface- - Do 8:46
» Blackmagic Camera 8.6 Public Beta
von -paleface- - Do 8:44
» FCPX/Motion, DaVinci/Fusion... Tipps&Tricks
von Frank Glencairn - Do 4:00
» Was hörst Du gerade?
von roki100 - Do 0:22
» Sony A9 III im Praxistest - ein echter Überraschungscoup auch für Filmer
von Mantas - Mi 23:27
» Video Pro X stürzt beim Multi Cam Schnitt ab
von MisterX - Mi 21:47
» [Suche] 3.5mm Klinkenstecker Überwurfmutter
von Skeptiker - Mi 21:02
» Uwe Boll: Wie man Filme produziert ohne pleite zu gehen!
von iasi - Mi 19:53
» 4 Gründe hartes Licht zu nutzen
von Frank Glencairn - Mi 19:19
» Nach 7 Jahren mit der OG BMPCC finde ich das Bild noch immer schön.
von Darth Schneider - Mi 18:58
» Verschachtelte Timeline im richtigen Seitenformat
von Clemens Schiesko - Mi 18:43
» Untertitel in FCPX bei vorhandener Textdatei?
von R S K - Mi 18:34
» Deckenlicht mobil abschatten
von Frank Glencairn - Mi 17:31
» LUTs für Canon R6 Mark II
von TomStg - Mi 12:24
» RED versucht User nach Übernahme durch Nikon zu beruhigen
von dienstag_01 - Mi 11:52
» Entfesseltes Storytelling mit der Video-KI Sora?
von Frank Glencairn - Mi 5:54
» Slashcam 2001 - Das Internet vergisst nichts!
von macaw - Di 21:37
» Dehancer Pro - Filmsimulation auf höchstem Niveau
von Frank Glencairn - Di 18:54
» Wie Dune Teil 2 entstand - DoP Greig Fraser und Hans Zimmer im Interview
von iasi - Di 13:32
» 3 Body Problem - so verfilmt man heute Bücher
von stip - Di 8:30
» Neue Sora Version
von Frank Glencairn - Di 7:54
» IDEENFINDUNG: Wie man spannende Filme entwickelt! mit Vi-Dan Tran (Actiondesigner DUNE)
von berlin123 - Di 6:47
» Kafka Serie
von rabe131 - Mo 23:09
» HDV Aufnahme wird nicht erkannt
von MisterX - Mo 20:49
» OpenAI Sora - das ist der KI-Video Gamechanger!
von Frank Glencairn - Mo 19:22
» Venice 2 Bildqualität zum halben Preis? Sony Burano Sensortest
von iasi - Mo 18:21
» Erste Battlemage GPU Samples aufgetaucht - Neue Grafikkarten noch 2024?
von slashCAM - Mo 18:15