Adobe demonstriert neues KI-Großmodell zur Konvertierung von 2D in 3D in nur 5 Sekunden

Was neu geschrieben werden muss, ist: Virtual-Reality-Gyroskop

Kürzlich hat Adobe Research mit Forschern der Australian National University zusammengearbeitet, um ein neues großes KI-Modell namens LRM zu entwickeln. Dieses Modell wandelt 2D-Bilder in nur 5 Sekunden in hochwertige 3D-Modelle um

Im Gegensatz zu früheren Methoden zum klassenspezifischen Training kleiner Datensätze verwendet LRM eine hoch skalierbare Transformer-basierte neuronale Netzwerkarchitektur mit über 500 Millionen Parametern. Das Modell wird durchgängig auf ~1 Million 3D-Objekten aus Objaverse- und MVImgNet-Datensätzen trainiert und sagt neuronale Strahlungsfelder (NeRF) direkt aus den Eingabebildern voraus

Bildquelle: yiconghong.me/LRM/

In dem Artikel „LRM: LARGE RECONSTRUCTION MODEL FOR SINGLE IMAGE TO 3D“ heißt es: „Die Kombination aus Modellen mit großer Kapazität und umfangreichen Trainingsdaten macht unser Modell äußerst vielseitig und funktioniert bei einer Vielzahl von Testeingaben gut, einschließlich realer- Welt erfasst und Bilder von Modellen generiert), um hochwertige 3D-Rekonstruktionen zu erstellen.“

Experimente haben gezeigt, dass LRM hochauflösende 3D-Modelle basierend auf realen Bildern und Bildern rekonstruieren kann, die von KI-generierten Modellen wie DALL-E und Stable Diffusio erstellt wurden. Das System kann detaillierte geometrische Formen erzeugen und komplexe Texturen wie Holz bewahren Getreide. Allerdings weist LRM immer noch gewisse Einschränkungen bei der Texturgenerierung in verdeckten Bereichen auf.

In Bezug auf die Anwendung hat LRM breite Perspektiven. Es kann auf verschiedene Szenarien wie Industriedesign, Spiele und Unterhaltung angewendet werden. Darüber hinaus kann LRM im Bereich AR/VR auch das Benutzererlebnis verbessern, indem detaillierte 3D-Umgebungen in Echtzeit generiert werden

Ohne die ursprüngliche Bedeutung zu ändern, ist der Inhalt, der ins Chinesische umgeschrieben werden muss: Quelle: Venturebeat

Das obige ist der detaillierte Inhalt vonAdobe demonstriert neues KI-Großmodell zur Konvertierung von 2D in 3D in nur 5 Sekunden. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!