Adobe, 단 5초 만에 2D에서 3D로 변환하는 새로운 AI 대형 모델 시연

다시 작성해야 할 것은: 가상 현실 자이로스코프

최근 Adobe Research는 호주 국립대학교 연구진과 협력하여 LRM이라는 새로운 AI 대형 모델을 개발했습니다. 이 모델은 단 5초 만에 2D 이미지를 고품질 3D 모델로 변환합니다

클래스별 방식으로 소규모 데이터세트를 학습하는 과거 방법과 달리 LRM은 5억 개가 넘는 매개변수를 갖춘 확장성이 뛰어난 Transformer 기반 신경망 아키텍처를 사용합니다. 이 모델은 Objaverse 및 MVImgNet 데이터세트의 100만 개에 달하는 3D 객체에 대해 엔드투엔드 방식으로 훈련되었으며 입력 이미지에서 직접 신경방사선장(NeRF)을 예측합니다

사진 출처: yiconghong.me/LRM/

논문 "LRM: 단일 이미지를 3D로 변환하기 위한 대규모 재구성 모델"에서는 "대용량 모델과 대규모 교육 데이터의 결합으로 우리 모델이 매우 다재다능해지고 실제 이미지를 포함한 다양한 테스트 입력에 따라 잘 작동합니다. 세계를 캡처하고 모델 이미지 생성)을 통해 고품질 3D 재구성을 생성합니다.”

실험에 따르면 LRM은 실제 이미지와 DALL-E 및 Stable Diffusio와 같은 AI 생성 모델로 생성된 이미지를 기반으로 충실도가 높은 3D 모델을 재구성할 수 있는 것으로 나타났습니다. 이 시스템은 상세한 기하학적 모양을 생성하고 나무와 같은 복잡한 질감을 보존할 수 있습니다. 곡물. 그러나 LRM은 여전히 ​​폐쇄된 영역의 텍스처 생성에 특정 제한 사항을 가지고 있습니다.

적용 측면에서 LRM은 광범위한 전망을 가지고 있습니다. 산업 디자인, 게임, 엔터테인먼트 등 다양한 시나리오에 적용할 수 있습니다. 또한 AR/VR 분야에서 LRM은 실시간으로 상세한 3D 환경을 생성하여 사용자 경험을 향상시킬 수도 있습니다

원래 의미를 바꾸지 않고 중국어로 다시 작성해야 하는 내용은 다음과 같습니다. 출처: Venturebeat

위 내용은 Adobe, 단 5초 만에 2D에서 3D로 변환하는 새로운 AI 대형 모델 시연의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!