Logo Logo
/// News

Nvidia Magic3D - beliebige 3D-Objekte durch Textbeschreibung erzeugen

[11:16 Di,29.November 2022 [e]  von ]    

Letzten Freitag kamen Forscher von Nvidia mit einem weiteren Meilenstein der KI-Entwicklung an die Öffentlichkeit: Das neue Tool Magic3D kann komplette 3D-Modelle aus einer einfachen Textbeschreibung erzeugen. In dem zugehörigen Paper beschreibt Nvidia einen zweistufigen Prozess, der ein grobes, in niedriger Auflösung erzeugtes Modell nimmt und es für eine höhere Auflösung optimiert.

Laut den Autoren des Papiers kann die daraus resultierende Magic3D-Methode 3D-Objekte zweimal schneller erzeugen als DreamFusion. Nach einer Eingabe wie beispielsweise "Ein silbernes Tablett auf dem sich Früchte stapeln" erzeugt Magic3D in etwa 40 Minuten ein 3D-Mesh-Modell mit farbiger Textur (auf acht NVIDIA A100 GPUs). Das ist doppelt so schnell wie ein ähnliches DreamFusion-Projekt von Google.



Magic3D_1
Nvidia Magic3D erzeugt aus einem Satz ein 3D-Modell mit Textur



Magic3D kann auch 3D-Modelle umkonstruieren. Dies funktioniert am besten mit dem (relativ schnell erzeugten) niedrig aufgelösten 3D-Modell indem man an dem Basis-Prompt feilt. Zudem demonstrieren die Autoren von Magic3D, wie man dasselbe Motiv über mehrere Generationen hinweg beibehält (ein Konzept, das oft als Kohärenz bezeichnet wird) und wie man den Stil eines 2D-Bildes (z. B. eines kubistischen Gemäldes) auf ein 3D-Modell anwendet.

Selber ausprobieren kann man das ganze allerdings noch nicht, denn mit der wissenschaftlichen Arbeit wurde (noch?) kein Code veröffentlicht. Da Magic3D aktuell auch noch sehr viel GPU-Leistung benötigt, um in akzeptabler Zeit zu einem Modell zu gelangen, ist eine Version für den heimischen Rechner allerdings sowieso nur bedingt sinnvoll.



Nvidia kündigte jedoch an, dass man die Modelle direkt ins eigene Omniverse einbinden und dort benutzen kann. Es ist daher stark anzunehmen, dass Nvidia auf jeden Fall eine Online-Version des Tools anbieten wird, um beliebige Gegenstände schnell in Digital Twin Welten als 3D-Objekte bereitstellen zu können.Alternative Entwicklungen aus der Ecke von Stable Diffusion sind jedoch auch schon auf dem Weg...

Magic3D_2



Link mehr Informationen bei deepimagination.cc

  
[noch keine Leserkommentare] [Kommentar schreiben]   

  Vorige News lesen Nächste News lesen 
bildTTArtisan C 35mm f/0,95: Super-lichtstarkes, manuelles S35/APS-C Objektiv für 295,- Euro bildNeue Lexar CFexpress Speicherkarten Typ A und B GOLD mit bis zu 320 GB bzw. 2TB


verwandte Newsmeldungen:
3D:

Asus: Neue 16" OLED Notebooks mit 3D ohne Brille und trotzdem voller 3.2K Auflösung 8.Januar 2023
PortKeys PT6: Günstiger 5.2" Kameramonitor mit 3D-LUTs, HDMI-Out und 100% DCI-P3 7.November 2022
AvatarCLIP: Neue KI generiert und animiert 3D-Avatare per Textbeschreibung 28.Oktober 2022
Luma AI: Neue Smartphone-App erstellt 3D-Modelle von beliebigen Objekten 21.Oktober 2022
DreamFusion: Neue Google KI generiert beliebige 3D Modelle - nur per Textbeschreibung 11.Oktober 2022
Neuer Nvidia Algorithmus erschafft aus Photos eines Objekts ein bearbeitbares 3D-Modell 24.Juni 2022
Selbstgebaut: Die 35mm Filmkamera aus dem 3D-Drucker 20.Mai 2022
alle Newsmeldungen zum Thema 3D

Computer:

Neuer KI-Effekt NVIDIA Eye Contact: Bye bye Teleprompter? 25.Januar 2023
2023: Das Jahr der innovativen Notebook-Displays 22.Januar 2023
Neue Apple Mac mini und MacBook Pro Modelle mit M2, M2 Pro und M2 Max 17.Januar 2023
Erster 6-GHz-Prozessor von Intel - Core i9-13900KS 13.Januar 2023
Paint.NET 5.0 - kostenlose Windows Bildbearbeitung jetzt mit GPU-Beschleunigung 12.Januar 2023
CES 2023 Laptop Lineup von MSI - 13.Gen Intel und RTX 40 von Nvidia 6.Januar 2023
Neue NVIDIA KI skaliert Videos in Echtzeit im Browser von 1080p nach 4K 6.Januar 2023
alle Newsmeldungen zum Thema Computer


[nach oben]

















passende Forenbeiträge zur News:

Archive

2023

Februar - Januar

2022
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 5.Februar 2023 - 12:02
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*