찾다
기술 주변기기일체 포함고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.

고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
위 애니메이션은 여러 장의 사진을 바탕으로 렌더링한 완전히 3D 장면이라는 점에 유의하세요. 인간이 자신의 결점을 발견하는 것은 어렵습니다.

그럼 이 시나리오가 어떻게 구현되는지 살펴보겠습니다.

그리드와 포인트는 가장 일반적인 3D 장면 표현이며 명시적이기 때문에 빠른 GPU/CUDA 기반 래스터화에 매우 적합합니다. 이와 대조적으로, 최첨단 NeRF(Neural Radiation Field) 방법은 연속적인 장면 표현을 기반으로 구축되었으며, 종종 체적 광선 렌더링에 최적화된 다층 퍼셉트론(MLP)을 사용하여 캡처된 장면에 대한 새로운 관점을 합성합니다. 이러한 방법의 연속성은 최적화에 도움이 되지만 렌더링에 필요한 무작위 샘플링은 비용이 많이 들고 잡음이 많습니다.

프랑스 리비에라 대학의 연구원들은 이 두 가지 방법의 장점을 결합할 수 있는 새로운 방법을 도입했습니다. 3D 가우스 표현은 SOAT 시각적 품질을 가지며 훈련 시간에도 최적화되는 반면 타일 기반 눈덩이 알고리즘( 타일 ​​기반 스플래팅)은 여러 데이터 세트에서 1080p 해상도로 SOTA 실시간 렌더링을 달성합니다.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
논문 주소: https://huggingface.co/papers/2308.04079
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
연구팀은 목표를 세웠습니다: 여러 장의 사진으로 촬영한 장면을 실시간으로 렌더링하고 일반적인 실제에서 가장 빠른 시간을 달성하는 것입니다. 장면 최적화. Fridovich-Kei et al.이 이전에 제안한 방법은 빠른 훈련을 달성했지만 최대 48시간의 훈련 시간이 필요한 현재 SOTA NeRF 방법으로 달성한 시각적 품질을 달성하기가 어려웠습니다. 장면에 따라 대화형 렌더링(초당 10~15프레임)을 달성할 수 있는 빠르지만 품질이 낮은 방사선장 방법을 제안하는 연구도 있지만 이 방법은 고해상도에서 실시간 렌더링을 달성할 수 없습니다.

다음으로 이 글이 어떻게 구현되는지 살펴보겠습니다. 연구팀의 솔루션은 크게 세 부분으로 구성된다.

먼저 유연하고 표현력이 풍부한 장면 표현으로 3D 가우시안을 소개합니다. 입력은 NeRF 방법과 유사합니다. 즉, 카메라는 SfM(Structure-from-Motion)을 사용하여 보정되고 3D 가우스 앙상블은 SfM 프로세스에서 파생된 희소 포인트 클라우드를 사용하여 초기화됩니다. 또한 본 연구에서는 SfM 포인트만을 입력으로 사용하여 높은 품질의 결과를 얻을 수 있었습니다. NeRF 합성 데이터세트의 경우 우리의 방법은 무작위 초기화를 통해서도 고품질 결과를 얻을 수 있다는 점에 유의해야 합니다. 연구에 따르면 3D 가우스가 좋은 선택인 것으로 나타났습니다.
둘째, 3D 위치, 불투명도, 이방성 공분산 및 구면 조화(SH) 계수와 같은 3D 가우스 속성을 최적화합니다. 최적화 프로세스는 장면을 다소 간결하고 구조화되지 않은 정확한 표현으로 생성합니다.

세 번째 실시간 렌더링 솔루션인 이 연구에서는 빠른 GPU 정렬 알고리즘을 사용합니다. 그러나 3D 가우스 표현으로 인해 정렬 및 블렌딩 덕분에 가시성 순서를 존중하면서 이방성 접합을 수행할 수 있으며 필요한 만큼 정렬된 접합의 순회를 추적하여 빠르고 정확하게 역방향 전달이 가능합니다.

방법 개요

요약하면 이 문서는 다음과 같은 기여를 합니다.

고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.방사선 장의 고품질 비구조적 표현으로 이방성 3D 가우스를 소개합니다.
적응형 밀도 제어와 결합하여 캡처된 장면의 고품질 표현을 생성하는 3D 가우스 속성을 위한 최적화 방법

가시성을 인식하는 GPU를 위한 빠른 미분 가능 렌더링 방법 -품질의 새로운 뷰 합성.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
Experiment

다음 그림은 본 ​​글의 방법과 이전 방법의 효과를 비교한 것입니다.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
위에서 아래까지의 장면은 딥 하이브리드 데이터 세트의 Mip-NeRF360 데이터 세트에 있는 자전거, 정원, 카운터 및 방입니다(자세한 비교를 보려면 원본 기사를 읽어보세요). 자전거의 살, 정원 끝자락에 있는 집의 유리, 쇠바구니의 기둥, 곰인형 등 다양한 방법에 의해 만들어진 상당한 차이가 그림에 표시되어 있습니다.

이 글에서 소개하는 방법은 이전 방법보다 세부적으로 더 많은 장점이 있다는 것을 알 수 있습니다.

고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
동영상에서 더 확연한 차이를 볼 수 있습니다.

또한 그림 6에서는 7K 반복(~5분)에도 불구하고 이 기사의 방법이 열차의 세부 정보를 매우 잘 포착합니다. 30K 반복(~35분)에서 배경 아티팩트가 크게 감소합니다. 정원 장면의 경우 차이가 거의 눈에 띄지 않으며 7K 반복(~8분)은 이미 매우 높은 품질입니다.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
연구팀은 Mip-NeRF360에서 제안한 방법을 채택하여 데이터 세트를 학습/테스트 부분으로 나누고 8장의 사진마다 테스트하여 일관되고 의미 있는 비교를 수행함으로써 오류 표시기를 생성하고 가장 일반적으로 사용되는 문헌의 표준 PSNR, L-PIPS 및 SSIM 지표는 자세한 데이터를 위해 표 1에 표시되어 있습니다.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
표 1은 세 가지 데이터세트에 걸쳐 계산된 이전 작업과 비교하여 새로운 방법에 대한 정량적 평가를 보여줍니다. "†" 표시가 있는 결과는 원 논문에서 직접 채택한 결과이고, 그 외의 결과는 실험팀의 실험 결과입니다.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
합성 NeRF의 PSNR 점수. 본 글의 방법은 대부분의 경우에 더 좋은 점수를 가지며 심지어 최적의 수준에 도달하는 것을 볼 수 있습니다.

절제 실험

연구팀은 다양한 기여와 알고리즘 선택을 분리하고 그 효과를 측정하기 위한 일련의 실험을 구성했습니다. 알고리즘의 다음 측면이 테스트되었습니다: SfM의 초기화, 치밀화 전략, 이방성 공분산, 그라데이션이 있는 무제한 수의 패치 허용, 구면 고조파 사용. 아래 표에는 각 옵션의 정량적 효과가 요약되어 있습니다.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
좀 더 직관적인 효과를 살펴보겠습니다.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
초기화에 SfM 포인트를 사용하면 더 나은 결과를 얻을 수 있습니다.
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
복제 및 분할의 두 경우 모두 절제 치밀화 전략
고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.
시각적 품질에 상당한 영향을 미치는 그라데이션을 허용하는 포인트 수를 제한합니다. 왼쪽: 수신된 그라데이션을 제한하는 10개의 가우스 포인트. 오른쪽: 이 기사의 전체 방법론.

자세한 내용은 원문을 읽어주세요.

위 내용은 고화질 영상은 여러 장의 사진에 렌더링된 3D 장면으로 인해 진위 여부를 구별하기 어렵습니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.
AI 기술 격차는 공급망을 늦추고 있습니다AI 기술 격차는 공급망을 늦추고 있습니다Apr 26, 2025 am 11:13 AM

"AI-Ready Workforce"라는 용어는 자주 사용되지만 공급망 산업에서 실제로 무엇을 의미합니까? ASCM (Association for Supply Chain Management)의 CEO 인 Abe Eshkenazi에 따르면 비평가가 가능한 전문가를 의미합니다.

한 회사가 AI를 영원히 변화시키기 위해 조용히 노력하는 방법한 회사가 AI를 영원히 변화시키기 위해 조용히 노력하는 방법Apr 26, 2025 am 11:12 AM

분산 된 AI 혁명은 조용히 운동량을 얻고 있습니다. 이번 주 금요일 텍사스 오스틴에서 Bittensor Endgame Summit은 중추적 인 순간을 표시하여 분산 된 AI (DEAI)를 이론에서 실제 적용으로 전환합니다. 화려한 광고와 달리

NVIDIA는 NEMO 마이크로 서비스를 방출하여 AI 에이전트 개발을 간소화합니다NVIDIA는 NEMO 마이크로 서비스를 방출하여 AI 에이전트 개발을 간소화합니다Apr 26, 2025 am 11:11 AM

Enterprise AI는 데이터 통합 ​​문제에 직면 해 있습니다 Enterprise AI의 적용은 비즈니스 데이터를 지속적으로 학습함으로써 정확성과 실용성을 유지할 수있는 시스템을 구축하는 주요 과제에 직면 해 있습니다. NEMO 마이크로 서비스는 NVIDIA가 "데이터 플라이휠"으로 묘사 한 내용을 작성 하여이 문제를 해결하여 AI 시스템이 엔터프라이즈 정보 및 사용자 상호 작용에 지속적으로 노출되어 관련성을 유지할 수 있도록합니다. 새로 출시 된이 툴킷에는 5 개의 주요 마이크로 서비스가 포함되어 있습니다. NEMO Customizer는 더 높은 교육 처리량으로 대형 언어 모델의 미세 조정을 처리합니다. NEMO 평가자는 사용자 지정 벤치 마크에 대한 AI 모델의 단순화 된 평가를 제공합니다. Nemo Guardrails는 보안 제어를 구현하여 규정 준수 및 적절성을 유지합니다.

AI는 미래의 미래와 디자인을위한 새로운 그림을 그립니다.AI는 미래의 미래와 디자인을위한 새로운 그림을 그립니다.Apr 26, 2025 am 11:10 AM

AI : 예술과 디자인의 미래 인공 지능 (AI)은 전례없는 방식으로 예술 및 디자인 분야를 변화시키고 있으며, 그 영향은 더 이상 아마추어에게만 국한되지 않고 전문가에게 더 큰 영향을 미칩니다. AI에 의해 생성 된 아트 워크 및 디자인 체계는 광고, 소셜 미디어 이미지 생성 및 웹 디자인과 같은 많은 트랜잭션 디자인 활동에서 전통적인 재료 이미지 및 디자이너를 빠르게 대체하고 있습니다. 그러나 전문 예술가와 디자이너는 AI의 실질적인 가치도 찾습니다. 그들은 AI를 보조 도구로 사용하여 새로운 미적 가능성을 탐색하고 다양한 스타일을 혼합하며 새로운 시각 효과를 만듭니다. AI는 아티스트와 디자이너가 반복적 인 작업을 자동화하고 다양한 디자인 요소를 제안하며 창의적인 입력을 제공하도록 도와줍니다. AI는 스타일 전송을 지원하며 이미지 스타일을 적용합니다.

에이전트 AI와의 작업을 혁신하는 방법 : 회의에서 이정표까지에이전트 AI와의 작업을 혁신하는 방법 : 회의에서 이정표까지Apr 26, 2025 am 11:09 AM

처음에는 화상 회의 플랫폼으로 유명한 Zoom은 에이전트 AI의 혁신적인 사용으로 직장 혁명을 이끌고 있습니다. Zoom의 CTO 인 XD Huang과의 최근 대화는 회사의 야심 찬 비전을 공개했습니다. 에이전트 AI 정의 Huang d

대학에 대한 실존 적 위협대학에 대한 실존 적 위협Apr 26, 2025 am 11:08 AM

AI가 교육에 혁명을 일으킬까요? 이 질문은 교육자와 이해 관계자들 사이에서 심각한 반영을 촉구하고 있습니다. AI를 교육에 통합하면 기회와 도전이 모두 나타납니다. Tech Edvocate의 Matthew Lynch로서 Universit

프로토 타입 : 미국 과학자들은 해외에서 일자리를 찾고 있습니다프로토 타입 : 미국 과학자들은 해외에서 일자리를 찾고 있습니다Apr 26, 2025 am 11:07 AM

미국의 과학 연구 및 기술의 발전은 아마도 예산 삭감으로 인해 어려움에 직면 할 수 있습니다. Nature에 따르면, 해외 일자리를 신청하는 미국 과학자의 수는 2024 년 같은 기간에 비해 2025 년 1 월부터 3 월까지 32% 증가했습니다. 이전 여론 조사에 따르면 설문 조사에 참여한 연구원의 75%가 유럽과 캐나다에서 일자리 검색을 고려하고 있음을 보여주었습니다. 지난 몇 개월 동안 수백 개의 NIH와 NSF 보조금이 종료되었으며, NIH의 새로운 보조금은 올해 약 23 억 달러로 줄어 듭니다. 유출 된 예산 제안에 따르면 트럼프 행정부는 과학 기관의 예산을 급격히 줄이는 것을 고려하고 있으며 최대 50%감소 할 수 있습니다. 기본 연구 분야의 혼란은 또한 미국의 주요 장점 중 하나 인 해외 인재 유치에 영향을 미쳤습니다. 35

Open AI의 최신 GPT 4.1 가족 - 분석 Vidhya에 관한 모든 것Open AI의 최신 GPT 4.1 가족 - 분석 Vidhya에 관한 모든 것Apr 26, 2025 am 10:19 AM

Openai는 강력한 GPT-4.1 시리즈를 공개합니다. 실제 응용 프로그램을 위해 설계된 3 개의 고급 언어 모델 패밀리. 이 중요한 도약 전진

See all articles

핫 AI 도구

Undresser.AI Undress

Undresser.AI Undress

사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover

AI Clothes Remover

사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool

Undress AI Tool

무료로 이미지를 벗다

Clothoff.io

Clothoff.io

AI 옷 제거제

Video Face Swap

Video Face Swap

완전히 무료인 AI 얼굴 교환 도구를 사용하여 모든 비디오의 얼굴을 쉽게 바꾸세요!

뜨거운 도구

에디트플러스 중국어 크랙 버전

에디트플러스 중국어 크랙 버전

작은 크기, 구문 강조, 코드 프롬프트 기능을 지원하지 않음

Atom Editor Mac 버전 다운로드

Atom Editor Mac 버전 다운로드

가장 인기 있는 오픈 소스 편집기

MinGW - Windows용 미니멀리스트 GNU

MinGW - Windows용 미니멀리스트 GNU

이 프로젝트는 osdn.net/projects/mingw로 마이그레이션되는 중입니다. 계속해서 그곳에서 우리를 팔로우할 수 있습니다. MinGW: GCC(GNU Compiler Collection)의 기본 Windows 포트로, 기본 Windows 애플리케이션을 구축하기 위한 무료 배포 가능 가져오기 라이브러리 및 헤더 파일로 C99 기능을 지원하는 MSVC 런타임에 대한 확장이 포함되어 있습니다. 모든 MinGW 소프트웨어는 64비트 Windows 플랫폼에서 실행될 수 있습니다.

드림위버 CS6

드림위버 CS6

시각적 웹 개발 도구

SecList

SecList

SecLists는 최고의 보안 테스터의 동반자입니다. 보안 평가 시 자주 사용되는 다양한 유형의 목록을 한 곳에 모아 놓은 것입니다. SecLists는 보안 테스터에게 필요할 수 있는 모든 목록을 편리하게 제공하여 보안 테스트를 더욱 효율적이고 생산적으로 만드는 데 도움이 됩니다. 목록 유형에는 사용자 이름, 비밀번호, URL, 퍼징 페이로드, 민감한 데이터 패턴, 웹 셸 등이 포함됩니다. 테스터는 이 저장소를 새로운 테스트 시스템으로 간단히 가져올 수 있으며 필요한 모든 유형의 목록에 액세스할 수 있습니다.