Aus dem Uncanny Valley mitten ins Herz

[slashCAM]

Kürzlich hat Roope Rainisto ein KI-Dreambooth Modell für "Realistische Fotos" präsentiert. Und dabei ist uns klar geworden, dass wir mittlerweile einen Kipppunkt bei der Erzeugung realistischer Fotos mittels Künstlicher Intelligenz überschritten haben...



Hier geht es zu Artikel auf den slashCAM Magazin-Seiten:
Editorials: Aus dem Uncanny Valley mitten ins Herz

[suchor]

Vlt. gibt es ja bald einen neuen Beruf: KI-Beschreiber. Also, wie beschreibe ich am besten der KI was für ein Bild es generieren soll. Absoluter Wahnsinn wie schnell sich das entwickelt .

[HerrWeissensteiner]

Die Berufsbezeichnung findet man schon und nennt sich "Prompt engineer". :-)

[nachtaktiv]

das is erst der anfang. KI lernt ja bekanntlich schnell mal exponentiell.

bald also dies...

"alexa? mach mir einen blockbuster."

zack, mit einem schlag die komplette filmindustrie arbeitslos.

[pillepalle]

das is erst der anfang. KI lernt ja bekanntlich schnell mal exponentiell.

bald also dies...

"alexa? mach mir einen blockbuster."

zack, mit einem schlag die komplette filmindustrie arbeitslos.

Nicht ganz. Denn aufgrund der Schwemme an Blockbustern sind dann richtig miese Filme total angesagt :)

VG

[cantsin]

"alexa? mach mir einen blockbuster."

zack, mit einem schlag die komplette filmindustrie arbeitslos.

Zumindest halte ich es für sehr realistisch, dass (a) in den heute an der Kinokasse dominanten Superhelden/Fantasy-Blockbusterproduktionen die meiste Bildgestaltung durch KI erledigt und dadurch die heute übliche Handarbeit (vor allem in der Postproduktion/für SFX) massiv reduziert wird, und zwar wirklich durch "prompt engineers", die die heutigen Gestalter-Armeen verdrängen; (b) Low Budget-/B-/Z-Filme in Zukunft von Hinterhofklitschen komplett per KI produziert werden und massenhaft die Streaming-Kanäle vermüllen.

[Bluboy]

"alexa? mach mir einen blockbuster."

zack, mit einem schlag die komplette filmindustrie arbeitslos.

Zumindest halte ich es für sehr realistisch, dass (a) in den heute an der Kinokasse dominanten Superhelden/Fantasy-Blockbusterproduktionen die meiste Bildgestaltung durch KI erledigt und dadurch die heute übliche Handarbeit (vor allem in der Postproduktion/für SFX) massiv reduziert wird, und zwar wirklich durch "prompt engineers", die die heutigen Gestalter-Armeen verdrängen; (b) Low Budget-/B-/Z-Filme in Zukunft von Hinterhofklitschen komplett per KI produziert werden und massenhaft die Streaming-Kanäle vermüllen.

Realistisch kann das nur bei Animationsfilmen werden

[markusG]

Zumindest halte ich es für sehr realistisch, dass (a) in den heute an der Kinokasse dominanten Superhelden/Fantasy-Blockbusterproduktionen die meiste Bildgestaltung durch KI erledigt und dadurch die heute übliche Handarbeit (vor allem in der Postproduktion/für SFX) massiv reduziert wird

...und vermutlich die [visuelle] Qualität wieder steigert^^



Ich glaube ein nicht unwesentlicher Teil weshalb ich die meisten Marvel-Filme nicht mag ist der inflationäre - und leider teils echt schlechte (uncanny valley artige) - Einsatz von CGI.

[nachtaktiv]

ich behaupte einfach mal, daß wir noch nicht wissen, wie gut KI filme sein werden. die besten GO spieler wissen mittlerweile auch nicht, warum eine KI so oder so spielt und - lernen mittlerweile von KIs.

https://escholarship.org/uc/item/6q05n7pz

der einwand: "ja aber, es is ja viel schwerer für eine KI zu erkennen, was beim publikum ankommt, als ein brettspiel zu analysieren" sei mit dem hinweis auf die exponentielle lernkurve von AI beantwortet. allein, was bei netflix an kundendaten und erfolgsauswertungen rum liegt... da kann schon ne menge angefüttert werden. und da ja auch heute schon film mittels schnittmuster gemacht wird (immer die gleichen spannungsbögen, überall orange & teal, übrall die in etwa gleichen regeln beim thema ausleuchtung etc.), bin ich mal gespannt, was da kommen wird. sicher wird nach der ersten AI kunst auch der erste AI film kommen.

auf jeden fall kann man sich heute mit der AI schon mal über ihre kunst unterhalten.

[tom]

Das Interessante ist ja, wie die Zusammenarbeit von Künstler und KI es ermöglicht, Ideen neuer/kombinierter visueller Konzepte die etwas ganz neues ergeben, ganz einfach umzusetzen, was zu phantastischen Ergebnissen führen kann.

Hier ein schönes Beispiel des Designers Johnny Darrell mit der MidJourney AI, das zeigt wie TRON ausgesehen hätte, wenn Alejandro Jodorowsky TRON die Regie geführt hätte:

Jodo-Tron-2-16.jpg

Jodo-Tron-2-12.jpg

Jodo-Tron-1-14.jpg

Jodo-Tron-1-9.jpg

Quelle:
https://www.djfood.org/fantasy-jodorows ... y-darrell/

[Funless]

Ich persönlich finde die ganze Sache mit der Bildergenerierung mittels KI extrem spannend auch weil mir persönlich die Ergebnisse sehr gefallen und auch das kreative Potenzial welches IMHO dahinter schlummert.

Als aktuelles Beispiel das neueste Musik Video von Disturbed welches ich bereits vor kurzem im "was hörst du"-Thread gepostet hatte, dieses wurde ausschließlich mit Textbasierten KI Bildern erstellt ...

Working with Midjourney, director Tristan Holmes created this video over a 30 day period entering prompts, using AI image generation of more than 10,000 frames, and creating frames to link the video together.

Und hier ein kleiner Einblick zum Entstehungsprozess.

[andieymi]

Fotografie ist - auch um den Begriff uncanny valley zu nutzen ein tricky Medium: Es gibt da viel mehr zu Robotik, 3D-Animationen (vs. 2D!) und letztendlich Games, letztendlich war sogar in der fotorealistischen Malerei vieles möglich, was nicht unter uncanny valley fällt, aber absolut fotorealistisch ist.

Das wird jetzt so eine Mittelstufe sein: Die AI hat gelernt - also ganz unkünstlich, machine learning ist eigentlich der Begriff, was anhand von Fotos von Personen normal aussieht. Dies allerdings - darauf zielt der Begriff letztendlich eher ab, weil die Schwierigkeiten da erst so richtig beginnen - für Games und Performances ("Schauspieler") nutzen zu können wird Ai noch viel zu lernen haben.

Menschliche Mimik ist quasi unendlich komplex, erst recht wenn man eine zeitliche Komponente hinzufügt und nicht nur mit Standbildern arbeitet. Jede "Ungenaugikeit" der AI (und davon gibt's viele, wenn man sich andere Engines und die verschiedenen Vorschläge, z.B. Midjourney anschaut) führt da zwangsläufig wieder mitten ins Uncanney Valley.

Auch wenn das nach mimimimi klingt: Das Modell jetzt macht sich momentane Stile in der Fotografie / Film zunutze. Wenn man Identifikation als Maxime näme, ich könnte bei den Personen rechts vielleicht meine Geschwister nicht 100% erkennen, selbst wenn die das wären. Sonnenbrille, Gesichter im Schatten, Hut, Hintergrund (Himmel) heller als Gesicht.... das klingt alles nach Ausreden, aber das sind alles Faktoren die Ai helfen, weil letztendlich Gesichtszüge "kaschiert", Augen nicht sichtbar sind etc.

Da wäre doch letztendlich das Kontrollexperiment interessant:
Studio, simple Beleuchtung, gut sichtbares Gesicht. 6 Fotos insgesamt, davon 5 Menschen und man muss die Ai finden. Oder umgekehrt, 5 Ai-Charaktere und finde den 1 Menschen.

Da fände ich wird es spannend, so ist es beeindruckend, aber letztendlich nicht die Große "Kunst" wenn man sich etwas mit machine Learning auseinandersetzt.


PS: Walter Benjamin würde im Grab mit mehreren Tausend RPM mit Vilem Flusser um die Wette rotieren, wenn die lesen könnten, dass die Bedienung von Ai kreativ ist. Ich streite das nicht ab, da schließt sich der Kreis zu Aura und Technobildern nur - full circle. Das ist die Imagination in der Eingabestufe und die Vollendung des technischen Apparats in der Ausgabestufe. Wie viel Imagination, wie viel Automatik? Das wird auch noch spannend.

[funkytown]

Gibt es einen Link bzw. Webseite wo man diese KI generierten Bilder mal selbst erzeugen kann, bzw. Stichworte eingeben kann?

[tom]

Gibt es einen Link bzw. Webseite wo man diese KI generierten Bilder mal selbst erzeugen kann, bzw. Stichworte eingeben kann?

Das kann man bei den Entwicklern der verschiedenen Bild-KIs - wenn man sich registriert hat man bei allen dreien einige freie Generierungen (bei DALL-E2 und Stable Diffusion sogar jeden Monat) - es gibt aber auch viele Dienste, die auf Stable Diffusion (weil es den Quellcode gibt) aufsetzen und die Bildgenerierungen kostenlos anbieten - bei diesen dauert aber üblicherweise die Bildgenerierung länger.

Midjourney
https://midjourney.gitbook.io/

Preise:
https://midjourney.gitbook.io/docs/billing


DALL-E2
https://openai.com/dall-e-2/

Stable Diffusion
https://stablediffusionweb.com/

Stable Diffusion frei:
https://huggingface.co/spaces/stability ... -diffusion
https://hotpot.ai/art-generator?s=stable-diffusion-api
https://www.starryai.com/stable-diffusion
....


Thomas
slashCAM

PS
War die Frage eigentlich für den "Ki macht´s möglich" Artikel gedacht, soll ich sie verschieben?

[markusG]

Gibt auch für lokale Anwendungen solche Webinterfaces für Stable Diffusion:

https://github.com/invoke-ai

Gibt auch ein bequemes Installationsskript. Das hat aber bei mir nicht ganz geklappt, vlt probier ich es nochmal manuell.
Gab wohl auch mal einen Binärinstaller, aber der wurde aus Gründen wieder offline genommen.