KI Forum



Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?



Alles rund um KIs (DeepLearning), Algorithmen für spezielle Effekte, zur Generierung von Bildern und Videos und mehr
Antworten
Alex
Beiträge: 1643

NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von Alex »





https://www.nvidia.com/en-us/geforce/ne ... st-update/

Das ist alles erst der Anfang, wir rauschen in eine neue Ära der Contenterstellung.



Jott
Beiträge: 21843

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von Jott »

Ziemlich cool.

Man muss halt in der Praxis sehen, ob das durchgehend funktioniert, ohne aufzufliegen. Bei Bewegungen, Kopf etwas drehen etc. - und vor allem auch mit dem üblichen miesen Licht und Schatten auf den Augen durch fiese Deckenleuchten, was bei Do-it-yourself-Videos ja Standard ist. So wie in den beiden Demos sieht's da nie aus.



Alex
Beiträge: 1643

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von Alex »

Jott hat geschrieben: Mo 23 Jan, 2023 08:43So wie in den beiden Demos sieht's da nie aus.
Vielleicht siehts in der Praxis dann eher so aus: 😂



Ich kann es leider nicht testen, habe keine RTX :(
https://www.nvidia.com/de-de/geforce/br ... dcast-app/



Frank Glencairn
Beiträge: 24187

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von Frank Glencairn »

Das geht schon, da gibt's nen Hack dafür (nur ne Zeile raus löschen)- such mal unter Nvidia Broadcast under GTX
Sapere aude - de omnibus dubitandum



DAF
Beiträge: 1202

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von DAF »

Alex hat geschrieben: Mo 23 Jan, 2023 08:26 ...
Das ist alles erst der Anfang, wir rauschen in eine neue Ära der Contenterstellung.
Interessantes Tool. Nie wieder aufräumen im Home-Studio oder Pizzakartons wegräumen. Einfach Hintergrund unscharf drehen ;)))

Das probier im mal aus. Aber mehr um z.B. bei live gestreamten Interviews/Talks im Freien den Hintergrund unscharf zu bekommen und die Augen der interviewten Person auch während Fragen in die Kamera gerichtet bleiben. Muss ja niemand wissen, in welchem Biergarten ich gerade arbeite.
Ob das mit bewegtem Hintergrund klappt...?

BTW: Wie läuft das in der nächsten Ära mit dem Kinder kriegen. Tamagotschi KI 2.0 - mit einstellbarer Duftnote der Windeln. Völlig ohne Stress bei der Erzeugung und mit Hibernation-Modus.

EDIT: Das mit dem "Biergarten" meine ich durchaus ernst. Ich habe ab und zu so outdoor Talk/Interview Situationen die teils live rausgehen. Wenn das klappt wäre es eine super Sache. Mal sehen...
Grüße DAF



markusG
Beiträge: 4697

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von markusG »

DAF hat geschrieben: Mo 23 Jan, 2023 10:39 EDIT: Das mit dem "Biergarten" meine ich durchaus ernst. Ich habe ab und zu so outdoor Talk/Interview Situationen die teils live rausgehen. Wenn das klappt wäre es eine super Sache. Mal sehen...
Im Zweifel ab ins Grüne:



Und nimm dich mal nicht so wichtig :P geht auch ohne Präsenz:



DAF
Beiträge: 1202

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von DAF »

markusG hat geschrieben: Di 24 Jan, 2023 23:39
DAF hat geschrieben: Mo 23 Jan, 2023 10:39 EDIT: Das mit dem "Biergarten" meine ich durchaus ernst. Ich habe ab und zu so outdoor Talk/Interview Situationen die teils live rausgehen. Wenn das klappt wäre es eine super Sache. Mal sehen...
Im Zweifel ab ins Grüne:
...
Klar, unauffälliger kannst du keine Outdoor-Cam-Session machen 🤣

greenscreen-outdoor.jpg
Grüße DAF
Du hast keine ausreichende Berechtigung, um die Dateianhänge dieses Beitrags anzusehen.



slashCAM
Administrator
Administrator
Beiträge: 11270

Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von slashCAM »


NVIDIA hat die neue Version 1.4 seines kostenlosen Tools "Broadcast" für Livestreaming und Videokonferenzen veröffentlicht, welches jetzt per KI zwei interessante neue GP...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?



teichomad
Beiträge: 419

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von teichomad »

Für den Notfall ok aber auf Band hätte ich lieber doch die geprompterte Version.



ksingle
Beiträge: 1824

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von ksingle »

Ich bin ein wenig überrascht über diese "vermeintliche" Neuheit.

Ist es denn nicht so, dass APPLE genau diese Augen-Korrektur schon mal vor einigen Jahren für "FaceTime" angekündgit hatte? (Siehe "Blickrichtung bei Videotelefonaten eigenständig korrigieren") Habe dann das Thema nicht weiter verfolgt und auch nichts mehr darüber gelesen.

UPDATE:
Habe gerade einen Facetime-Videoanruf getätigt. Da funktioniert die Augenkorrektur ebenfalls, wenn man in die Kamera des eigenen iPhones schaut. Ist das dann wirklich ein "neuer" Effekt von NVIDIA?
WEB-Agentur Jürgen Meier - Köln
https://prysma.de
Das verkaufe ich aktuell: http://bit.ly/3QskXmz



Totao
Beiträge: 250

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von Totao »

Im Artikel steht:

"Der zweite neue Effekt ist der Vignetteneffekt (Hintergrund-Unschärfe),"

Vignettierung ist natürlich was anderes als Hintergrund-Unschärfe.

Ich habe mir nVidias Seite angeschaut und ichh denke schon dass nVidia den Begriff Vignette richtig verwendet und die Hintergrund-Unschärfe ein davon unabhängiger Effekt ist. Der Artikel wirft es fälschlicherweise durcheinander.



funkytown
Beiträge: 1183

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von funkytown »

Definitiv kein Ersatz für einen Telerprompter, wer möchte schon permament angestarrt werden? Das ist völlig unnatürlich. Beim Erzählen schweift der Blick auch mal ab, man guckt nach oben, nach links und dann wieder in die Kamera. Netter Gimmick, mehr aber auch nicht.



Alex
Beiträge: 1643

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von Alex »

funkytown hat geschrieben: Do 26 Jan, 2023 11:34 Definitiv kein Ersatz für einen Telerprompter, wer möchte schon permament angestarrt werden? Das ist völlig unnatürlich.
So "unnatürlich" wie bei den Nachrichten? Oder bei einem Standup-Comedian? Oder der Ansprache des Bundeskanzlers? Oder, oder, oder...
Andersrum gefragt, wohin guckt denn der Prota, wenn er vom Prompter abliest?



teichomad
Beiträge: 419

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von teichomad »

Alex hat geschrieben: Do 26 Jan, 2023 15:01
funkytown hat geschrieben: Do 26 Jan, 2023 11:34 Definitiv kein Ersatz für einen Telerprompter, wer möchte schon permament angestarrt werden? Das ist völlig unnatürlich.
So "unnatürlich" wie bei den Nachrichten? Oder bei einem Standup-Comedian? Oder der Ansprache des Bundeskanzlers? Oder, oder, oder...
Andersrum gefragt, wohin guckt denn der Prota, wenn er vom Prompter abliest?
Ich schätze er meint auch die Pausen. Wenn dich jemand wie auf Drogen unaufhörlich anstarrt, wirkt das schon komisch und AI-mäßig.



pillepalle
Beiträge: 9096

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von pillepalle »

Hatte kürzlich bei einem Dreh ein kleines Mallheur. Wir hatten im Hochfromat gedreht und ich hatte gar nicht dran gedacht das der Teleprompter nicht im Hochformat funktioniert, weil er oben und unten im Bild ist. Wir hatten dann einfach ein iPad an der Kamera platziert, aber manchmal eben etwas zu lässig daneben, sodaß es natürlich voll abgelesen aussieht. Gerade bei den Nahen :) Ich habe jetzt mal Nvidia Eye-Contact ausprobiert um das zu korrigieren und es funktioniert tatsächlich recht gut. Ja, wenn man das Original kennt, sieht es teilweise sehr nach Glupschauge aus, aber ich finde die Ergebnisse in der Not gar nicht so schlecht .

Normalerweise funktioniert der KI-Effekt nur im Stream, aber ein findiger Asiate hat einen redirect geschrieben der ihn auch für bereits aufgenommenes Material nutzbar macht. Ist etwas hampelig, weil man eine RTX Grafikkarte braucht und den neusten Ge-Force Game-Ready Treiber installiert haben muss (nutze ja normalerweise den Studiotreiber), aber nach dem Rendern, kann man den Treiber ja wieder wechseln. Außerdem muss man sich das Umleitungsprogramm Programm vom Asiaten auf den Rechner laden. Also nichts für Angsthasen/Sicherheitsfanatiker :) Aber es funktioniert tatasächlich auf Anhieb tadellos. Geht nur mit .mp4 Dateien und der Ton ist weg, aber das sind ja keine ernsthaften Showstopper. Hab' euch mal zwei kurze Clips hochgeladen die den Effekt zeigen.

Hier noch der Reddit-Link wie man das ganze zum Laufen bekommt:
https://www.reddit.com/r/blackmagicdesi ... ntact_ai/
und noch der Youtube Link dazu:



Original


Mit Glupschaugen 😅


Ist doch in der Not ein cooles Tool, wie ich finde.

VG
Dynamik ist nur was für Luschen die ihr Licht am Set nicht im Griff haben.



Alex
Beiträge: 1643

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von Alex »

Die Brille macht manchmal komische Effekte, aber sonst, wirklich erstaunlich.



pillepalle
Beiträge: 9096

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von pillepalle »

@ Alex

Ja, ich habe auch bewußt mit mein schwierigstes Beispiel gepostet. Da schaut er wirklich extrem woanders hin und bewegt auch noch den Kopf dabei. Aber in allen anderen Fällen wo ich das gemacht habe, sieht das wirklich Tip-Top aus. Man erkennt die KI Augen manchmal daran, daß das Augenweiß gelegentlich etwas weißer ist als im Original (änderungen im Licht rechnet es nicht dazu) und wenn die KI den Blick neu erfasst, geht der Blick erst langsam in die Kamera (dauert so ca. 1 Sekunde), aber dadurch wirkt das noch halbwegs natürlich. Klar ist das nur ein Fix, aber in dem Fall kann ich wunderbar damit leben. Und einmal installiert kann man das Redirekt-Programm immer wieder nutzen. Man muss eben nur den Treiber wechseln, wenn man mit dem Studiotreiber unterwegs ist.

VG

PS: Hab' übrigens festgestellt das es auch mit dem Studiotreiber geht :)
Dynamik ist nur was für Luschen die ihr Licht am Set nicht im Griff haben.
Zuletzt geändert von pillepalle am Mo 04 Dez, 2023 18:01, insgesamt 1-mal geändert.



prime
Beiträge: 1516

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von prime »

Ohne es getestet zu haben, geht das doch bestimmt auch mit der Virtual Camera von OBS. Also Originalvideo in OBS ausspielen und per Virtual Camera dann im Nvidia Tool korrigieren lassen und wiederum auf einen eigenen Server streamen lassen ;-)



pillepalle
Beiträge: 9096

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von pillepalle »

@ prime

Kann sein, aber ehrlich gesagt klingt das komplizierter :) So braucht man sich nur die Datei vom Asiaten herunterladen und laufen lassen. Rendert dann auch superschnell auf den eigenen Rechner, ohne Dateien herumschieben zu müssen.

VG
Dynamik ist nur was für Luschen die ihr Licht am Set nicht im Griff haben.



 Aktuelle Beiträge [alle Foren]
 
» Was schaust Du gerade?
von 7River - Sa 14:55
» Schulter -Kamera und -Rig im Vergleich zu Stativ
von acrossthewire - Sa 14:38
» Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert
von blip - Sa 14:22
» Wer sollte nicht Regisseur werden?
von 7River - Sa 14:06
» Dream Machine Video-KI bekommt Endframe-Funktion
von slashCAM - Sa 12:27
» Nikon Z6 III - Sensor-Bildqualität, Rolling Shutter, Dynamik - Günstige Z8 für Filmer?
von iasi - Sa 11:56
» Alte Halogenstrahler auf LED umbauen... wer hat Erfahrung?
von Frank Glencairn - Sa 10:29
» Godzilla Minus One
von Axel - Sa 9:20
» DaVinci Resolve 18.6 - Fusion 3D Camera Renderer
von Jörg - Sa 9:19
» Neue Drohnen im Anflug: Erst DJI Air 3S, dann Mavic 4?
von Jost - Sa 8:34
» Was hörst Du gerade?
von klusterdegenerierung - Fr 21:02
» Erstes AI Formel 1 Rennen
von Frank Glencairn - Fr 19:23
» "Twisters" wirbelt ins Kino
von Darth Schneider - Fr 17:57
» Zuckeberg über Open Scource AI
von Frank Glencairn - Fr 17:32
» Gold & Beton
von pillepalle - Fr 17:31
» Alpa 7M3 Videoaufnahmen Weitwinkel
von SteveHH1965 - Fr 16:41
» Canon EOS R1 und EOS R5 Mark II im ersten Hands-On und Praxistest
von iasi - Fr 6:26
» Linsen (Vintage, Anamorphic & Co.)
von roki100 - Fr 0:16
» DeutschlandGPT?
von DKPost - Do 21:09
» RED-Technologie soll in Nikon-Kameras wandern - REDCODE RAW? Sensoren..?
von iasi - Do 18:58
» Beratung für Video-Einsteiger mit großer Fotografie-Erfahrung
von Axel - Do 17:58
» Stable Video 4D errechnet neue 3D-Ansichten eines bewegten Objekts
von slashCAM - Do 15:36
» DGO-Sensoren - Was hemmt die Technologie trotz hoher Dynamik?
von rkunstmann - Do 15:34
» Kwai stellt KI-Videogenerator KLING vor - direkte Konkurrenz für Sora?
von jakob123 - Do 15:13
» Sound für Promi Backstage Doku
von j.t.jefferson - Do 14:07
» Neuer Kinefinity Eagle SDI EVF für Cine-Kameras vorgestellt
von slashCAM - Mi 19:27
» Video-KI Kling AI ab sofort endlich kostenlos weltweit verfügbar
von Totao - Mi 17:07
» Und landete im Nirwana...
von Skeptiker - Mi 15:39
» Longlegs - Nicolas Cage als Serienkiller
von Frank Glencairn - Mi 13:58
» Crash Zoom
von Blackbox - Mi 13:25
» Update für Cinecred - Kostenloses Tool für professionelle Filmabspänne
von Skeptiker - Mi 8:47
» horizontale Laufschrift ruckelt - davinci resolve
von jaroma - Mi 8:28
» Blackmagic DaVinci Resolve 19 Public Beta 5 ist da
von Frank Glencairn - Di 17:24
» Zum selber ausprobieren: Diese KI verändert das Alter von Gesichtern
von 7River - Di 17:09
» Test Footage Samples Sample Footage Download - Wo?
von HarryAlexa - Di 16:21