AI 콘텐츠 제로! 순수 무작위 수학은 프린스턴 출신 중국인의 작품인 사실적인 3D 세계를 무한히 생성합니다.

이미지와 동영상 생성은 AI에 의존해야 한다고 누가 말했나요?

프린스턴 대학교의 새로운 인공물은 "No AI"에 특별히 중점을 두고 무한히 사실적인 3D 세계를 생성할 수 있습니다.

효과를 잠깐 느껴보세요:

영상이라고 생각하지 마세요. 완전하다 그 뒤에 3D 자산을 설정하고 모델링 소프트웨어 Blender를 기반으로 구축했습니다.

이때 모든 블렌더 유저들이 저를 팔로우하고 있습니다. 응?

이러한 방식으로 매개변수를 사용하여 세부 사항을 제어할 수 있습니다.

또는 해당 광학 흐름 맵, 3D 장면 광학 흐름 맵, 깊이 맵, 파노라마 분할 맵 등을 가져오고 라이브를 쉽게 유지할 수 있습니다. 다양한 CV 미션.

가장 중요한 것은 무료 오픈 소스라는 것입니다!

엄마는 더 이상 AI에게 먹일 고품질 3D 데이터를 찾을 수 없다고 걱정하지 않으셔도 됩니다...

랜덤 수학을 기반으로 한 100% 3D 데이터 생성기

AI의 급속한 발전에도 불구하고, CV 분야는 현재 특히 3D 분야에서 고품질 데이터가 여전히 부족합니다.

한 가지 해결책은 합성 데이터를 사용하는 것입니다. 이러한 유형의 데이터에 대해 훈련된 모델은 샘플이 없는 실제 이미지에서도 매우 잘 수행될 수 있는 것으로 나타났습니다.

하지만 문제는 대부분의 기존 무료 3D 합성 데이터 도구가 기본적으로 자율 주행과 관련된 단일 장면이나 실내 환경에 위치한 인공 물체 등 단일 장면으로 제한된다는 것입니다.

그래서 작가는 특히 현실 세계의 자연스러운 장면을 확대하기 위해 이 Blender 기반의 인피니젠임의의 수학적 규칙을 기반으로

을 만들어 다양한 장면을 무한히 생성해냈습니다.

Infinigen은 주로 Blender의 "프리미티브"

(또는 프리미티브)

를 사용하여 코딩을 통해 실제 자연 장면에서 다양한 객체 생성을 완료하는 프로그램 규칙 라이브러리를 설계합니다.

이 논문에서는 주로 Infinigen의 프로그램 시스템을 소개합니다.
• Node Transpiler
(노드 변환기)

. 이는 프로그래머가 아닌 사용자도 Infinigen을 쉽게 사용할 수 있도록 Blender 노드 그래프를 Python 코드로 자동 변환할 수 있습니다.

아래 그림과 같이 생성되는 코드는 더 일반적이므로 입력 매개변수와 그래프 구조를 모두 무작위화할 수 있습니다.

• Generator Subsystems(생성기 하위 시스템), Infinigen의 발전기는 확률 기반 프로그램이며, 각 프로그램은 하위 객체(산이나 물고기 등) 을 생성하는 데 전념합니다. 각 객체에는 사용자가 Python API를 사용하여 조정할 수 있는 높은 수준의 매개변수
(예: 산의 총 높이)
• 세트가 있어 데이터 생성을 세밀하게 제어할 수 있습니다. Material Generators
(Material Generators)

, 총 50개, 각각 색상과 반사도를 지정할 수 있는 무작위 셰이더와 해당 미세한 기하학적 세부 사항을 생성하는 로컬 기하학 생성기로 구성됩니다.

🎜아래 그림과 같이 매우 사실적인 기하학적 디테일을 보장할 수 있습니다. 🎜

• Terrain Generators (Terrain Generator), 이 생성기는 아래 그림과 같이 반복 압출을 통해 바위를 생성할 수 있으며, 블렌더에 내장된 플러그인을 사용하여 작은 암석을 생성할 수 있습니다.

그리고 Infinigen이 FLIP을 사용하여 동적 유체를 시뮬레이션하고 Blender의 입자 시스템을 사용하여 날씨를 시뮬레이션하도록 도와주세요.

• Plants & Underwater Object Generators(식물 및 수중 개체 생성기). 무작위 걷기와 같은 알고리즘을 사용하여 나무 성장을 모델링하여 다양한 나무, 관목, 선인장 3D 세계를 덮는 나무를 만듭니다.

또는 차등 성장, 라플라시안 성장 및 반응 확산을 사용하여 다양한 산호를 생성하고 기하학적 노드 그래프를 사용하여 잎, 꽃, 해초, 다시마, 연체 동물 및 해파리를 생성할 수 있습니다.

다양한 보조 발전기도 있습니다(생물학적 발전기 등)하나씩 소개하지는 않겠습니다.

이 외에도 Infinigen에는 아래 표시된 유형의 이미지를 생성하는 데 주로 사용되는 이미지 렌더링 및 Ground Truth 추출 프로그램도 포함되어 있습니다.

전자의 경우 시스템은 자연 법칙에 기반한 Blender의 경로 추적 렌더러 사이클을 사용하여 이미지를 렌더링합니다.

저자는 인피니젠의 프로그램 룰 개발에 블렌더를 사용했지만, 프로그램 생성의 상당 부분이 블렌더 외부에서 이루어졌다고 소개했다.

또한 Infinigen을 구축하는 것은 거대한 소프트웨어 프로젝트이며 코드 베이스의 주요 분기에만 40,485줄의 코드가 포함되어 있다고 밝혔습니다.

마지막으로 Infinigen은 Intel Xeon Silver 4114 @ 2.20GHz CPU 2개와 NVidia GPU 1개에서 벤치마킹되었으며 1080p 이미지 한 쌍을 생성하는 데 걸리는 시간은 (벽 시간) 3.5시간 이었습니다.

아래 표는 기존 합성 데이터 세트 또는 생성기와 비교한 것입니다.

Infinigen의 가장 큰 장점은 외부 참조 리소스 라이브러리 없이 프로그래밍 방식으로 무제한의 자연스러운 3D 데이터를 생성할 수 있으며 다른 것은 작동하지 않는다는 점이라고 저자는 말했습니다. 팀 소개

인피니젠은 이번주 수요일 CVPR 컨퍼런스에서 포스터 발표를 진행합니다.

저자는 모두 프린스턴 대학의 Vision & Learning Lab 출신입니다.

세 명의 공동 저자 중 한 명인

Ma Zeyu는 프린스턴 대학에서 박사 과정을 밟고 있는 3년차 학생이며 2020년에 칭화 대학에서 전기 공학 학사 학위를 취득했습니다. 교신 저자는 프린스턴 대학교 컴퓨터 공학과 부교수

Deng Jia입니다.

현재 Infinigen의 코드는 GitHub에서 출시되었으며 단 이틀 만에 별 850개를 받았습니다.

논문 주소:
https://www.php.cn/link/d9812f756d0df06c7381945d2e2c7d4b프로젝트 홈페이지 :
https:/ /www.php.cn/link/ca886eb9edb61a42256192745c72cd79
GitHub 주소:
https://www.php.cn/link/a1cb608a30fc2883eed0831dcf25f260

위 내용은 AI 콘텐츠 제로! 순수 무작위 수학은 프린스턴 출신 중국인의 작품인 사실적인 3D 세계를 무한히 생성합니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!