Luma AI hat mit Ray2 eine neue Video-KI veröffentlicht, die realistische Bilder mit natürlicher, kohärenter Bewegung generiert und auch komplizierte Prompts verstehen kann. Das Ray2-Modell basiert auf Lumas neuer, multimodaler Architektur und wurde mit der zehnfachen Rechenleistung des Vorgängermodells trainiert.
Ray2 soll die Probleme vieler bisheriger Video-KI-Modelle überwinden und in der Lage sein, auch schnelle Bewegungen fehlerfrei darzustellen, Bilddetails ultrarealistisch abzubilden und kausale Ereignisabfolgen kohärent zu produzieren. Dadurch soll es zu deutlich weniger Ausschuss bei der Videoerzeugung kommen.
Das neue Ray2-Modell ist ab sofort in Lumas Dream Machine per Text-zu-Video-Generierung verfügbar, zunächst nur für Bezahl-Abos – nicht für das kostenlose. Weitere Funktionen wie Bild-zu-Video, Video-zu-Video und eine Bearbeitung von Videos per Prompt sollen bald folgen. Noch können die aktuell 5 Sekunden langen Clips (mit einer Auflösung von 720p (1.280 x 720) und 24 Bildern pro Sekunde) nicht verlängert werden. Ray2 wird bald auch in die Luma API integriert und kann dann in andere Tools eingebunden werden.
Die zahlreichen Democlips sehen tatsächlich sehr gut aus – natürliche Bewegungssequenzen, die normalerweise bei Video-KIs recht fehleranfällig sind, wie zum Beispiel beim Ballett oder Fechten, sowie schnelle, komplexe Aufgaben wie eine galoppierende Pferdeherde zeigen deutlich weniger Probleme als zuvor. Ebenso gelingen auch klassische KI-Demomotive wie die Miniaturkatze, die Eisbären mit Sonnenbrille, Fleischschneiden, häkelnde Hände, Tauchfahrt durch die Unterwasserstadt, fließender Honig, Jeepfahrt oder der Flug durch die Gemäldegalerie.
Und was beinahe noch wichtiger ist (weil die offiziellen Demos natürlich immer cherry-picked sind) – auch die von Usern erzeugten Clips bestätigen den guten Eindruck: die (menschlichen) Bewegungen schauen relativ natürlich aus.
No, this is NOT another episode of The Last of Us. It is FULLY generated with AI!
This is @LumaLabsAI #Ray2
Presenting "RUN"
Having early access to Ray2, this trailer is created entirely with an advanced state-of-the-AI-art text-to-video model by #LumaDreamMachine
// Top-News auf einen Blick:
- Überraschung: Kyno 1.9 ist erschienen mit Apple Silicon Support und neuem Design
- Wiegt die DJI Mini 5 Pro wirklich unter 250 Gramm?
- RØDE senkt Preise für seine RØDE Wireless Mikrofonsysteme radikal
- iPhone 17 Pro: ProRes RAW, Genlock, Apple Log 2 und Blackmagic ProDock für Filmer
- Canon Cinema EOS C50 Sensor-Bildqualität - Debayering, Rolling Shutter und Dynamik
The… pic.twitter.com/glcFJ8OKhF
— Digital da Vincis (@davincisdigital) January 15, 2025
Volume up My first Ray 2 film. Inspired by my friend @Diesol video of the surfing gorilla. Ray 2 is the real deal. @LumaLabsAI #ray2 pic.twitter.com/lNMNleMp09
— Jeff_synthesized (@JeffSynthesized) January 15, 2025
I gotta say I have been testing tf outta @LumaLabsAI &s Ray 2 over the past few days. They killed this update.
Leaps and bounds ahead of their last 1.6 model. Excited it&s finally at a place where I can more confidently rely on it for quality generations. https://t.co/DnXFBuhJnN pic.twitter.com/QtDQUeLxzm
— VividFeverDreams (@VividFeverDrms) January 16, 2025
This is #Ray2 @LumaLabsAI
Sound #MMAudio pic.twitter.com/txOsA2NnqV
— Freddy Chávez Olmos (@FreddyChavezO) January 15, 2025
I have the chance to get access to @LumaLabsAI #Ray2
And is amaazing ,
The possibilities are endless
Incredible generations and an incredible team!
Here they are some of my favourite generations during this time, all of them Tex to video! pic.twitter.com/acoUnCu2tc
— Guillermo Castellanos (@guicastellanos1) January 15, 2025
