KI Forum



Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?



Alles rund um KIs (DeepLearning), Algorithmen für spezielle Effekte, zur Generierung von Bildern und Videos und mehr
Antworten
Alex
Beiträge: 2077

NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von Alex »





https://www.nvidia.com/en-us/geforce/ne ... st-update/

Das ist alles erst der Anfang, wir rauschen in eine neue Ära der Contenterstellung.



Jott
Beiträge: 22855

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von Jott »

Ziemlich cool.

Man muss halt in der Praxis sehen, ob das durchgehend funktioniert, ohne aufzufliegen. Bei Bewegungen, Kopf etwas drehen etc. - und vor allem auch mit dem üblichen miesen Licht und Schatten auf den Augen durch fiese Deckenleuchten, was bei Do-it-yourself-Videos ja Standard ist. So wie in den beiden Demos sieht's da nie aus.



Alex
Beiträge: 2077

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von Alex »

Jott hat geschrieben: ↑Mo 23 Jan, 2023 08:43So wie in den beiden Demos sieht's da nie aus.
Vielleicht siehts in der Praxis dann eher so aus: 😂



Ich kann es leider nicht testen, habe keine RTX :(
https://www.nvidia.com/de-de/geforce/br ... dcast-app/



Frank Glencairn
Beiträge: 26509

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von Frank Glencairn »

Das geht schon, da gibt's nen Hack dafür (nur ne Zeile raus löschen)- such mal unter Nvidia Broadcast under GTX
Sapere aude - de omnibus dubitandum



DAF
Beiträge: 1202

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von DAF »

Alex hat geschrieben: ↑Mo 23 Jan, 2023 08:26 ...
Das ist alles erst der Anfang, wir rauschen in eine neue Ära der Contenterstellung.
Interessantes Tool. Nie wieder aufräumen im Home-Studio oder Pizzakartons wegräumen. Einfach Hintergrund unscharf drehen ;)))

Das probier im mal aus. Aber mehr um z.B. bei live gestreamten Interviews/Talks im Freien den Hintergrund unscharf zu bekommen und die Augen der interviewten Person auch während Fragen in die Kamera gerichtet bleiben. Muss ja niemand wissen, in welchem Biergarten ich gerade arbeite.
Ob das mit bewegtem Hintergrund klappt...?

BTW: Wie läuft das in der nächsten Ära mit dem Kinder kriegen. Tamagotschi KI 2.0 - mit einstellbarer Duftnote der Windeln. Völlig ohne Stress bei der Erzeugung und mit Hibernation-Modus.

EDIT: Das mit dem "Biergarten" meine ich durchaus ernst. Ich habe ab und zu so outdoor Talk/Interview Situationen die teils live rausgehen. Wenn das klappt wäre es eine super Sache. Mal sehen...
Grüße DAF



markusG
Beiträge: 5225

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von markusG »

DAF hat geschrieben: ↑Mo 23 Jan, 2023 10:39 EDIT: Das mit dem "Biergarten" meine ich durchaus ernst. Ich habe ab und zu so outdoor Talk/Interview Situationen die teils live rausgehen. Wenn das klappt wäre es eine super Sache. Mal sehen...
Im Zweifel ab ins Grüne:



Und nimm dich mal nicht so wichtig :P geht auch ohne Präsenz:



DAF
Beiträge: 1202

Re: NVIDIA Eye Contact - Bye bye Teleprompter

Beitrag von DAF »

markusG hat geschrieben: ↑Di 24 Jan, 2023 23:39
DAF hat geschrieben: ↑Mo 23 Jan, 2023 10:39 EDIT: Das mit dem "Biergarten" meine ich durchaus ernst. Ich habe ab und zu so outdoor Talk/Interview Situationen die teils live rausgehen. Wenn das klappt wäre es eine super Sache. Mal sehen...
Im Zweifel ab ins Grüne:
...
Klar, unauffälliger kannst du keine Outdoor-Cam-Session machen 🤣

greenscreen-outdoor.jpg
Grüße DAF
Du hast keine ausreichende Berechtigung, um die Dateianhänge dieses Beitrags anzusehen.



slashCAM
Administrator
Administrator
Beiträge: 11279

Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von slashCAM »


NVIDIA hat die neue Version 1.4 seines kostenlosen Tools "Broadcast" für Livestreaming und Videokonferenzen veröffentlicht, welches jetzt per KI zwei interessante neue GP...
Bild
Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?



teichomad
Beiträge: 436

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von teichomad »

Für den Notfall ok aber auf Band hätte ich lieber doch die geprompterte Version.



ksingle
Beiträge: 1859

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von ksingle »

Ich bin ein wenig überrascht über diese "vermeintliche" Neuheit.

Ist es denn nicht so, dass APPLE genau diese Augen-Korrektur schon mal vor einigen Jahren für "FaceTime" angekündgit hatte? (Siehe "Blickrichtung bei Videotelefonaten eigenständig korrigieren") Habe dann das Thema nicht weiter verfolgt und auch nichts mehr darüber gelesen.

UPDATE:
Habe gerade einen Facetime-Videoanruf getätigt. Da funktioniert die Augenkorrektur ebenfalls, wenn man in die Kamera des eigenen iPhones schaut. Ist das dann wirklich ein "neuer" Effekt von NVIDIA?
WEB-Agentur Jürgen Meier - Köln
• https://prysma.de



Totao
Beiträge: 297

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von Totao »

Im Artikel steht:

"Der zweite neue Effekt ist der Vignetteneffekt (Hintergrund-Unschärfe),"

Vignettierung ist natürlich was anderes als Hintergrund-Unschärfe.

Ich habe mir nVidias Seite angeschaut und ichh denke schon dass nVidia den Begriff Vignette richtig verwendet und die Hintergrund-Unschärfe ein davon unabhängiger Effekt ist. Der Artikel wirft es fälschlicherweise durcheinander.



funkytown
Beiträge: 1198

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von funkytown »

Definitiv kein Ersatz für einen Telerprompter, wer möchte schon permament angestarrt werden? Das ist völlig unnatürlich. Beim Erzählen schweift der Blick auch mal ab, man guckt nach oben, nach links und dann wieder in die Kamera. Netter Gimmick, mehr aber auch nicht.



Alex
Beiträge: 2077

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von Alex »

funkytown hat geschrieben: ↑Do 26 Jan, 2023 11:34 Definitiv kein Ersatz für einen Telerprompter, wer möchte schon permament angestarrt werden? Das ist völlig unnatürlich.
So "unnatürlich" wie bei den Nachrichten? Oder bei einem Standup-Comedian? Oder der Ansprache des Bundeskanzlers? Oder, oder, oder...
Andersrum gefragt, wohin guckt denn der Prota, wenn er vom Prompter abliest?



teichomad
Beiträge: 436

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von teichomad »

Alex hat geschrieben: ↑Do 26 Jan, 2023 15:01
funkytown hat geschrieben: ↑Do 26 Jan, 2023 11:34 Definitiv kein Ersatz für einen Telerprompter, wer möchte schon permament angestarrt werden? Das ist völlig unnatürlich.
So "unnatürlich" wie bei den Nachrichten? Oder bei einem Standup-Comedian? Oder der Ansprache des Bundeskanzlers? Oder, oder, oder...
Andersrum gefragt, wohin guckt denn der Prota, wenn er vom Prompter abliest?
Ich schätze er meint auch die Pausen. Wenn dich jemand wie auf Drogen unaufhörlich anstarrt, wirkt das schon komisch und AI-mäßig.



pillepalle
Beiträge: 11254

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von pillepalle »

Hatte kürzlich bei einem Dreh ein kleines Mallheur. Wir hatten im Hochfromat gedreht und ich hatte gar nicht dran gedacht das der Teleprompter nicht im Hochformat funktioniert, weil er oben und unten im Bild ist. Wir hatten dann einfach ein iPad an der Kamera platziert, aber manchmal eben etwas zu lässig daneben, sodaß es natürlich voll abgelesen aussieht. Gerade bei den Nahen :) Ich habe jetzt mal Nvidia Eye-Contact ausprobiert um das zu korrigieren und es funktioniert tatsächlich recht gut. Ja, wenn man das Original kennt, sieht es teilweise sehr nach Glupschauge aus, aber ich finde die Ergebnisse in der Not gar nicht so schlecht .

Normalerweise funktioniert der KI-Effekt nur im Stream, aber ein findiger Asiate hat einen redirect geschrieben der ihn auch für bereits aufgenommenes Material nutzbar macht. Ist etwas hampelig, weil man eine RTX Grafikkarte braucht und den neusten Ge-Force Game-Ready Treiber installiert haben muss (nutze ja normalerweise den Studiotreiber), aber nach dem Rendern, kann man den Treiber ja wieder wechseln. Außerdem muss man sich das Umleitungsprogramm Programm vom Asiaten auf den Rechner laden. Also nichts für Angsthasen/Sicherheitsfanatiker :) Aber es funktioniert tatasächlich auf Anhieb tadellos. Geht nur mit .mp4 Dateien und der Ton ist weg, aber das sind ja keine ernsthaften Showstopper. Hab' euch mal zwei kurze Clips hochgeladen die den Effekt zeigen.

Hier noch der Reddit-Link wie man das ganze zum Laufen bekommt:
https://www.reddit.com/r/blackmagicdesi ... ntact_ai/
und noch der Youtube Link dazu:



Original


Mit Glupschaugen 😅


Ist doch in der Not ein cooles Tool, wie ich finde.

VG
Es geht doch nichts über ein solides Halbwissen.



Alex
Beiträge: 2077

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von Alex »

Die Brille macht manchmal komische Effekte, aber sonst, wirklich erstaunlich.



pillepalle
Beiträge: 11254

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von pillepalle »

@ Alex

Ja, ich habe auch bewußt mit mein schwierigstes Beispiel gepostet. Da schaut er wirklich extrem woanders hin und bewegt auch noch den Kopf dabei. Aber in allen anderen Fällen wo ich das gemacht habe, sieht das wirklich Tip-Top aus. Man erkennt die KI Augen manchmal daran, daß das Augenweiß gelegentlich etwas weißer ist als im Original (änderungen im Licht rechnet es nicht dazu) und wenn die KI den Blick neu erfasst, geht der Blick erst langsam in die Kamera (dauert so ca. 1 Sekunde), aber dadurch wirkt das noch halbwegs natürlich. Klar ist das nur ein Fix, aber in dem Fall kann ich wunderbar damit leben. Und einmal installiert kann man das Redirekt-Programm immer wieder nutzen. Man muss eben nur den Treiber wechseln, wenn man mit dem Studiotreiber unterwegs ist.

VG

PS: Hab' übrigens festgestellt das es auch mit dem Studiotreiber geht :)
Es geht doch nichts über ein solides Halbwissen.
Zuletzt geändert von pillepalle am Mo 04 Dez, 2023 18:01, insgesamt 1-mal geändert.



prime
Beiträge: 1560

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von prime »

Ohne es getestet zu haben, geht das doch bestimmt auch mit der Virtual Camera von OBS. Also Originalvideo in OBS ausspielen und per Virtual Camera dann im Nvidia Tool korrigieren lassen und wiederum auf einen eigenen Server streamen lassen ;-)



pillepalle
Beiträge: 11254

Re: Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter?

Beitrag von pillepalle »

@ prime

Kann sein, aber ehrlich gesagt klingt das komplizierter :) So braucht man sich nur die Datei vom Asiaten herunterladen und laufen lassen. Rendert dann auch superschnell auf den eigenen Rechner, ohne Dateien herumschieben zu müssen.

VG
Es geht doch nichts über ein solides Halbwissen.



 Aktuelle Beiträge [alle Foren]
 
» Nanlite PavoTube II 6CP: Kompakte LED-Röhre mit größerem Farbumfang
von Blackbox - Mo 22:44
» Woran arbeitet Adobe? Experimentelle KI-Tools für Video und Audio
von philr - Mo 21:07
» Canon PowerShot (G-Serie) ?
von cantsin - Mo 20:38
» Nikon ZR in der Praxis: 6K 50p RED RAW Monster für 2.349,- Euro mit klassenbester Colorscience?
von pillepalle - Mo 18:18
» Noch mehr Sony-Kameras erhalten C2PA-basierte Video-Authentizitätsprüfung
von Blackbox - Mo 18:15
» HILFE - Kurzfilm
von 7River - Mo 17:31
» Blackmagic veröffentlicht kostenlosen Einsteiger-Guide für DaVinci Resolve 19
von Axel - Mo 16:41
» Blackmagic Pocket Cinema Camera 4K Sensor-Test - Wiedersehen mit ProRes RAW
von Darth Schneider - Mo 14:28
» Wie entwickeln Schauspieler ihre Rollen? Mit ANKE ENGELKE
von Nigma1313 - Mo 13:32
» Suche Henkelkamera
von Marcodshild - Mo 11:26
» Graphite - kostenloser Grafik-Editor von Photoshop bis Motion
von Hayos - So 21:59
» RED erklärt die Umbenennung von NEV-Dateien in R3D
von iasi - So 20:16
» Setup and forget Kamera für Livestream
von trekjk - So 18:55
» Affinity Photo, Designer und Publisher ab sofort in einer kostenlosen App
von vaio - So 12:58
» FireWire ExpressCard TI gesucht!
von dienstag_01 - So 12:17
» RØDE Wireless Microphone Camera Kit - Funkmikro-Set für Kameras
von slashCAM - So 12:02
» Audioequimment für extreme Wetteraufnahmen gesucht
von Jörg - So 9:52
» V-Mount-Akku (IDX Micro 98) tiefentladen
von Blackbox - So 3:50
» Dte Rekorder gesucht
von Marcodshild - Sa 20:32
» Erster Trailer zu Francis Ford Coppolas Megalopolis erschienen
von Jott - Sa 20:17
» Focus Firestore FS-4 Pro HD
von Marcodshild - Sa 15:20
» Kamera bei asgoodasnew kaufen
von Bildlauf - Sa 13:59
» Sony FX3 Nachfolger: Wie wichtig ist Open Gate wenn ein elektronisch verstellbarer ND Filter möglich wäre?
von Mantas - Sa 13:45
» Was hörst Du gerade?
von Nigma1313 - Sa 10:22
» HASSLIEBE deutscher Film? Mit Wolfgang M. Schmitt
von 7River - Sa 6:25
» Nach 7 Jahren mit der OG BMPCC finde ich das Bild noch immer schön.
von roki100 - Fr 19:47
» Was schaust Du gerade?
von Darth Schneider - Fr 19:01
» Der deutsche STUNTMAN für Dune, James Bond & Marvel! VI-DAN TRAN
von Darth Schneider - Fr 14:59
» iPhone 17 Pro Max im Praxistest: ProRes RAW, Apple Log 2 - inkl. DJI Osmo Pocket Vergleich
von 123oliver - Fr 9:45
» Adobe Firefly generiert jetzt auch KI-Soundtracks und Voice-Over
von ruessel - Fr 9:29
» Morgen ist heute gestern | Kurzfilm 2025
von Merlin films - Do 20:57
» DJI Neo 2 bringt Rundum-Hinderniserkennung samt LiDAR
von slashCAM - Do 17:42
» Neue Firmware für Sony Alpha 1 II und Sony Alpha 9 III bringt neue Funktionen
von slashCAM - Do 13:33
» 110-Ohm-Mikrofonkabel Wasserdicht bis 20 m
von Blackbox - Do 3:55
» KI: Bessere Sprachverständlichkeit
von freezer - Mi 22:24