slashCAM
Administrator
Administrator
Beiträge: 11279

Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von slashCAM »


KI-Videomodelle werden zunehmend besser, die Qualität ihres Outputs hängt bekanntlich jedoch stark von dem Videomaterial ab, anhand dessen sie lernen, wie Videos auszuseh...

Hier geht es zur Newsmeldung auf den slashCAM Magazin-Seiten:
Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert



Blackbox
Beiträge: 749

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von Blackbox »

"eine Voraussetzung dafür ist ja auch, dass es "versteht", was jeweils errechnet werden soll."

Ob es da wirklich ein 'Verstehen' gibt wage ich zu bezweifeln.
Es ist wohl eher ein 'Zuordnen' in ein jeweiliges Schubladensystem?
Das Dilemma des grundlegenden Nicht-Verstehens zeigt sich ja auch bei den Ergebnissen von Ki-Inzucht ohne ausreichenden menschlich kreativen Zustrom:
https://www.scinexx.de/news/technik/kue ... n-kollaps/



Da_Michl
Beiträge: 157

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von Da_Michl »

@blockbox:
Pauschal kann (muss?) man wohl sagen, das die meisten KI-Anwender weit davon entfernt sind, (auch nur annähernd) zu verstehen, was ML Systeme und LLMs von konventionellen software-Algorithmen unterscheidet.
Ich nehme mich da persönlich auch nicht heraus (Hab zumindest den schritt geschafft, dass ich weiß, dass es fundamentale unterschiede gibt. :-) )



iasi
Beiträge: 28443

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von iasi »

Demnächst darf Literatur auch nicht mehr zum Schulen von Kindern genutzt werden. :)

Sobald die lieben Kleinen in ihren Aufsätzen seine Formulierung nutzen, die in einem Buch zu finden ist, führt dies zu rechtlichen Problemen. ;)



cantsin
Beiträge: 16238

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von cantsin »

Da_Michl hat geschrieben: Sa 27 Jul, 2024 11:01 @blockbox:
Pauschal kann (muss?) man wohl sagen, das die meisten KI-Anwender weit davon entfernt sind, (auch nur annähernd) zu verstehen, was ML Systeme und LLMs von konventionellen software-Algorithmen unterscheidet.
Ich nehme mich da persönlich auch nicht heraus (Hab zumindest den schritt geschafft, dass ich weiß, dass es fundamentale unterschiede gibt. :-) )
Ein konventioneller Algorithmus ist eine strukturierte Handlungsanweisung - im Prinzip wie ein Kochrezept -, während LLMs eigentlich nur Wahrscheinlichkeitstabellen bzw. Heuristiken auf der Basis von Trainingsdaten sind.

Der Unterschied ist der, als wenn (a) jemand z.B. einem Pizzabäcker bei der Arbeit zusieht, dessen Arbeitsschritte analysiert und zu verstehen versucht und auf Basis dieser Analyse ein genaues Rezept aufschreibt, (b) jemand hundert Pizzabäcker beobachtet, Gemeinsamkeiten bzw. Wahrscheinlichkeiten/Grundmuster ihres Vorgehens notiert, ohne wirklich zu verstehen, was sie machen, und auf Basis dieser Muster ein ungefähres Rezept mit diversen Variationsmöglichkeiten aufschreibt.
"Wieso eigentlich überhaupt was drehen? Warum nicht jahrelang nur darüber philosophieren?" -stip



Da_Michl
Beiträge: 157

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von Da_Michl »

Danke Cantsin!
Tatsächlich war ich in etwa schon so weit in meinem Verständnis...vielleicht hab ich vorher etwas untertrieben.
Jedenfalls sehr anschaulich erklärt, vielen Dank!



Frank Glencairn
Beiträge: 26509

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von Frank Glencairn »

cantsin hat geschrieben: Sa 27 Jul, 2024 11:49 ohne wirklich zu verstehen, was sie machen ...
.. oder auch nur zu verstehen was eine Pizza überhaupt ist - könnte jetzt auch ne Fußmatte sein.
Sapere aude - de omnibus dubitandum
Zuletzt geändert von Frank Glencairn am Sa 27 Jul, 2024 12:23, insgesamt 1-mal geändert.



iasi
Beiträge: 28443

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von iasi »

cantsin hat geschrieben: Sa 27 Jul, 2024 11:49
Da_Michl hat geschrieben: Sa 27 Jul, 2024 11:01 @blockbox:
Pauschal kann (muss?) man wohl sagen, das die meisten KI-Anwender weit davon entfernt sind, (auch nur annähernd) zu verstehen, was ML Systeme und LLMs von konventionellen software-Algorithmen unterscheidet.
Ich nehme mich da persönlich auch nicht heraus (Hab zumindest den schritt geschafft, dass ich weiß, dass es fundamentale unterschiede gibt. :-) )
Ein konventioneller Algorithmus ist eine strukturierte Handlungsanweisung - im Prinzip wie ein Kochrezept -, während LLMs eigentlich nur Wahrscheinlichkeitstabellen bzw. Heuristiken auf der Basis von Trainingsdaten sind.

Der Unterschied ist der, als wenn (a) jemand z.B. einem Pizzabäcker bei der Arbeit zusieht, dessen Arbeitsschritte analysiert und zu verstehen versucht und auf Basis dieser Analyse ein genaues Rezept aufschreibt, (b) jemand hundert Pizzabäcker beobachtet, Gemeinsamkeiten bzw. Wahrscheinlichkeiten/Grundmuster ihres Vorgehens notiert, ohne wirklich zu verstehen, was sie machen, und auf Basis dieser Muster ein ungefähres Rezept mit diversen Variationsmöglichkeiten aufschreibt.
Dein (a) und (b) unterscheiden sich doch nur durch die Anzahl der Pizzabäcker, die du beobachtest.
Mal ist es 1, mal sind es 100.
Die Chance, ein gutes Pizzarezept zu erhalten, ist bei 100 Beobachtungen höher.



cantsin
Beiträge: 16238

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von cantsin »

iasi hat geschrieben: Sa 27 Jul, 2024 12:04 Dein (a) und (b) unterscheiden sich doch nur durch die Anzahl der Pizzabäcker, die du beobachtest.
Mal ist es 1, mal sind es 100.
Die Chance, ein gutes Pizzarezept zu erhalten, ist bei 100 Beobachtungen höher.
Nein, beim ersten Beispiel ist es eine strukturierte Beobachtung und Analyse, beim zweiten Beispiel ist es nur Abspicken bzw. Rate-Heuristik auf Grund sich wiederholender Handlungsmuster.

Du kannst den Algorithmus - also das strukturiert-analytisch abgeleitete Rezept - auch aus der systematischen Beobachtung und Analyse von 100 Bäckern entwickeln.

Die Heuristik lässt sich automatisieren, die Analyse nicht. Bei der Heuristik kannst Du daher im Handumdrehen einen Pizzaautomaten bauen und dafür Riesen-Datenmengen auswerten, die kein menschlicher Programmierer bewältigen bzw. analysieren kann - aber immer mit dem Risiko, dass der KI-/ML-Pizzabäcker Dir z.B. die Tomatensauce mit Hefe anrührt - genauso, wie Du beim ML-Bildgenerator das Risiko hast, dass Dir Hände mit sechs Fingern generiert werden.
"Wieso eigentlich überhaupt was drehen? Warum nicht jahrelang nur darüber philosophieren?" -stip



iasi
Beiträge: 28443

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von iasi »

cantsin hat geschrieben: Sa 27 Jul, 2024 12:14
iasi hat geschrieben: Sa 27 Jul, 2024 12:04 Dein (a) und (b) unterscheiden sich doch nur durch die Anzahl der Pizzabäcker, die du beobachtest.
Mal ist es 1, mal sind es 100.
Die Chance, ein gutes Pizzarezept zu erhalten, ist bei 100 Beobachtungen höher.
Nein, beim ersten Beispiel ist es eine strukturierte Beobachtung und Analyse, beim zweiten Beispiel ist es nur Abspicken bzw. Rate-Heuristik auf Grund sich wiederholender Handlungsmuster.

Du konstruierst da einen Unterschied, den es nicht gibt.
Wenn du deinen Pizzabäcker beobachtest, tust du nichts anderes, wie wenn es 100 Beobachtungen sind.
Ein Ereignis oder 100 - eine strukturierte Beobachtung und Analyse ist immer notwendig.


cantsin hat geschrieben: Sa 27 Jul, 2024 12:14 Du kannst den Algorithmus - also das strukturiert-analytisch abgeleitete Rezept - auch aus der systematischen Beobachtung und Analyse von 100 Bäckern entwickeln.

Die Heuristik lässt sich automatisieren, die Analyse nicht. Bei der Heuristik kannst Du daher im Handumdrehen einen Pizzaautomaten bauen und dafür Riesen-Datenmengen auswerten, die kein menschlicher Programmierer bewältigen bzw. analysieren kann - aber immer mit dem Risiko, dass der KI-/ML-Pizzabäcker Dir z.B. die Tomatensauce mit Hefe anrührt - genauso, wie Du beim ML-Bildgenerator das Risiko hast, dass Dir Hände mit sechs Fingern generiert werden.
Deine Analyse funktioniert bei dir ebenso, wie bei einer KI. Du schätzt die Ergebnismenge ab.
Du kennst das Ziegenproblem?
Die intuitive Lösung ist hier nicht die richtige.
Deine Analyse beruht immer auch auf Daten, die du gesammelt hast und auswertest.
Und nicht immer ist diese Auswertung dann auch richtig.

Zudem:
Wer sagt dir denn, dass dein Pizzabäcker, den du beobachtest, gute Pizzen backt? :)



Da_Michl
Beiträge: 157

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von Da_Michl »

Da_Michl hat geschrieben: Sa 27 Jul, 2024 11:01 ...
Pauschal kann (muss?) man wohl sagen, das die meisten KI-Anwender weit davon entfernt sind, (auch nur annähernd) zu verstehen, was ML Systeme und LLMs von konventionellen software-Algorithmen unterscheidet.
...
Q.e.d.?!
😐



cantsin
Beiträge: 16238

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von cantsin »

iasi hat geschrieben: Sa 27 Jul, 2024 13:27
Deine Analyse funktioniert bei dir ebenso, wie bei einer KI. Du schätzt die Ergebnismenge ab.
Du kennst das Ziegenproblem?
Die intuitive Lösung ist hier nicht die richtige.
Deine Analyse beruht immer auch auf Daten, die du gesammelt hast und auswertest.
Und nicht immer ist diese Auswertung dann auch richtig.
Ich gebe Dir mal ein Zitat von Aleksander Madry, KI-Forscher am MIT, über den Unterschied zwischen Analyse und heuristischer Datenauswertung. Madry nennt letztere "faul" ("lazy"):
"Faul in dem Sinne wie ein gewitzter Student, der nicht wirklich für eine Prüfung lernen will. Stattdessen studiert er einfach alle Prüfungen der vergangenen Jahre und sucht nach Mustern. Anstatt zu versuchen, wirklich zu lernen, versucht er nur, die Prüfung zu bestehen. Und das ist genau die gleiche Art und Weise, in der die heutige KI faul ist."
https://news.mit.edu/2022/promise-pitfa ... dxmit-0111

Aus demselben Grund kann ChatGPT völlig absurde Rechenfehler machen, wenn Du ihm Excel-Sheets zur Berechnung gibst, weil es die Zahlen nicht wirklich berechnet, sondern Dir nur das wahrscheinliche Ergebnis gibt.
"Wieso eigentlich überhaupt was drehen? Warum nicht jahrelang nur darüber philosophieren?" -stip
Zuletzt geändert von cantsin am Sa 27 Jul, 2024 13:52, insgesamt 1-mal geändert.



iasi
Beiträge: 28443

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von iasi »

Da_Michl hat geschrieben: Sa 27 Jul, 2024 13:39
Da_Michl hat geschrieben: Sa 27 Jul, 2024 11:01 ...
Pauschal kann (muss?) man wohl sagen, das die meisten KI-Anwender weit davon entfernt sind, (auch nur annähernd) zu verstehen, was ML Systeme und LLMs von konventionellen software-Algorithmen unterscheidet.
...
Q.e.d.?!
😐
Es sind Wahrscheinlichkeitsmodell, was konventionelle software-Algorithmen nicht sind.

Unser Denken funktioniert ebenso.



markusG
Beiträge: 5202

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von markusG »

Frank Glencairn hat geschrieben: Sa 27 Jul, 2024 12:02
cantsin hat geschrieben: Sa 27 Jul, 2024 11:49 ohne wirklich zu verstehen, was sie machen ...
.. oder auch nur zu verstehen was eine Pizza überhaupt ist - könnte jetzt auch ne Fußmatte sein.
Oder eine Frau :D



TheBubble
Beiträge: 2017

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von TheBubble »

iasi hat geschrieben: Sa 27 Jul, 2024 11:44 Sobald die lieben Kleinen in ihren Aufsätzen seine Formulierung nutzen, die in einem Buch zu finden ist, führt dies zu rechtlichen Problemen. ;)
Zitate mit Quellenangabe sind erlaubt. Wer das "vergisst", hat schon jetzt eine Grenze überschritten, was u.a. immer wieder zum Nichtbestehen von Prüfungen führt, teils auch nachträglicher Aberkennung von Prüfungsleistungen.



blip
Administrator
Administrator
Beiträge: 331

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von blip »

Blackbox hat geschrieben: Fr 26 Jul, 2024 19:05 "eine Voraussetzung dafür ist ja auch, dass es "versteht", was jeweils errechnet werden soll."

Ob es da wirklich ein 'Verstehen' gibt wage ich zu bezweifeln.
Es ist wohl eher ein 'Zuordnen' in ein jeweiliges Schubladensystem?
Das Dilemma des grundlegenden Nicht-Verstehens zeigt sich ja auch bei den Ergebnissen von Ki-Inzucht ohne ausreichenden menschlich kreativen Zustrom:
https://www.scinexx.de/news/technik/kue ... n-kollaps/
Ja genau, da die aktuellen Systeme durch das Training kein echtes Verständnis erlangen (nach unserm Sinne), schreiben wir "verstehen" in Anführungszeichen - es ging hier darum, dass das KI-Modell lernt, Bildinhalte mit deren Bezeichnungen zu verknüpfen, damit über die Prompts entsprechende Bildausgaben erzielt werden.

Wie sich neuronale Netze vom herkömmlichen Programmieransatz unterscheiden, hatten wir in diesem Artikel versucht, einfach zu erklären
https://www.slashcam.de/artikel/Wissen/ ... -Loss.html



Frank Glencairn
Beiträge: 26509

Re: Runway Gen-3 Video-KI wurde an tausenden, ausgesuchten YouTube-Videos trainiert

Beitrag von Frank Glencairn »

Wie das Magazin 404 nun recherchiert hat, wurde die neueste Gen-3 des mit Sora konkurrierenden Videomodells Runway offensichtlich u.a. mit speziell ausgesuchten, hochqualitativen YouTube-Videos trainiert.
Wie Nvidia, Apple, Anthropic, Open AI/Sora und wahrscheinlich alle anderen auch.
YT ist halt nun mal die größte frei und öffentlich verfügbare AI-Trainingsmüllhalde - so what?
Sapere aude - de omnibus dubitandum



 Aktuelle Beiträge [alle Foren]
 
» Lohnt es sich als kleiner Filmemacher Equipment zu vermieten?
von Franky3000 - Di 17:32
» DJI Mavic 4 Pro in der Praxis: 10Bit 6K 50p Log, 360° Gimbal – für wen lohnt sich die C2 Drohne?
von Franky3000 - Di 17:26
» S: Videokamera
von Darth Schneider - Di 17:07
» Vermutlich 8k 60fps bei Sony A7V?
von Jott - Di 16:09
» Firmware-Updates für die Panasonic Lumix S1RII, S1II und S1IIE
von cantsin - Di 15:37
» Gibt es für Actioncams eine Art Anti-Fisheye Linse?
von DrRobbi - Di 14:31
» Star Trek: Third Rate - Fan Film
von Darth Schneider - Di 11:21
» Nvidia GeForce RTX 5050 im Anflug - 10 Bit 4:2:2 Decoding für 200 Euro?
von slashCAM - Di 10:24
» Magic Lantern mit deutlichem Lebenszeichen - Frische Motivation und frischer Code
von Da_Michl - Di 9:44
» Seit Update auf DaVinci Resolve Studio 20: Problem mit Film Look Creator
von Bruno Peter - Di 9:42
» Bildsensor mit Perowskit verdreifacht mögliche Auflösung
von CotORR - Di 8:48
» Was schaust Du gerade?
von roki100 - Mo 23:27
» 36% mehr DSLMs ausgeliefert im April als im Vorjahr
von iasi - Mo 23:00
» Neuer XAVC-L Standard für ARD/ZDF – Interlacing noch Thema?
von vaio - Mo 21:26
» Higgsfield.ai - Aufwändige Videoeffekte auf Knopfdruck aus der KI-Cloud
von Drushba - Mo 18:34
» Adobe bringt kostenlose Profi-Kamera App mit KI-Funktionen
von freezer - Mo 16:52
» Manueller Video Modus nicht mehr erreichbar.
von milesdavis - Mo 15:45
» Rode Wireless Go 3 - Ton zu leise
von rush - Mo 10:49
» BM Micro Studio Camera G2 erhält Pyxis Monitor Kompatibelität
von Darth Schneider - Mo 9:19
» Was hast Du zuletzt gekauft?
von Axel - Mo 6:52
» Dynamic Range iPhone?
von Axel - Mo 6:30
» Suche Omnidirektionales Mikrofon-Setup für Sony FX3
von pillepalle - Mo 6:25
» Bildschirmaufnahme mit VLC Player oder andere Software?
von gunman - So 21:07
» Unzuverlässiger Autofokus HC-X2E
von Jott - So 20:39
» Apple entwickelte spezielle iPhone-Kamera für Aufnahmen aus dem Formel 1 Cockpit
von Valentino - So 18:19
» UHD Progressive zu HD Interlaced Workflow - Hardware-Lösung für Preview?
von SonyTony - So 13:06
» Kompakte OM-5 Mark II bekommt zwei neue Bildprofile
von cantsin - So 10:25
» Nikon Z5 II mit interner RAW-Aufzeichnung - Debayering, Rolling Shutter und Dynamik
von cantsin - So 9:09
» Film wurde nur mit Handys gedreht...
von Jott - Sa 20:48
» Insta360 Studio - Bildjustagen verschwunden nach update
von soulbrother - Sa 20:09
» Was hörst Du gerade?
von 7River - Sa 15:33
» Welche USB-C SSD für 4k120 prores am iPhone 16 Pro?
von Totao - Sa 11:43
» Die beste Hardware für KI-Video - oder was man wirklich (nicht) braucht...
von Totao - Sa 11:38
» Werbung - es geht auch gut ;) Sammelthread
von Darth Schneider - Fr 18:13
» Kleines Schwanenhalsmikro für AVX-Bodypacksenser gesucht
von pillepalle - Fr 16:04