検索
ホームページテクノロジー周辺機器AIAI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです

19 世紀は印象派芸術運動が栄えた時代で、絵画、彫刻、版画などの芸術の分野に影響を与えました。印象派は、形式的な正確さをほとんど追求せずに、短いスタッカートのブラシストロークを使用することを特徴とし、後に印象派の芸術スタイルに発展しました。つまり、印象派の画家の筆致は修正されておらず、明らかな特徴を示しており、形式的な正確さを追求しておらず、どこか曖昧ですらある。印象派の芸術家は、光と色の科学的な概念を絵画に導入し、伝統的な色の概念に革命をもたらしました。

D3GA では、作成者はユニークな目標を持っており、逆のことを行うことでフォトリアリスティックなパフォーマンス効果を作成したいと考えています。この目標を達成するために、著者は仮想キャラクターの構造と外観を構築し、リアルタイムで安定した効果を実現するための最新の「セグメント ブラシストローク」として D3GA のガウス スプラッター テクノロジーを創造的に使用しました。

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです

「日の出・印象」は印象派の有名画家モネの代表作です。

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです


アニメーション用の新しいコンテンツを生成できるリアルな人物像を作成するには、現在アバターの構築が必要です。大量の作業用マルチビューデータ。これは、単眼式の方法では精度が限られているためです。さらに、既存の技術では、正確な 3D レジストレーションを含む複雑な前処理が必要です。ただし、これらの登録データの取得には反復が必要であり、エンドツーエンドのプロセスに統合するのは困難です。 さらに、正確な登録を必要とせず、神経放射野 (NeRF) に基づく方法もあります。ただし、これらの方法では、リアルタイム レンダリングが遅くなったり、衣服のアニメーションに問題が生じたりすることがよくあります。

Kerbl らは、古典的なサーフェス スプラッティング レンダリング方法をベースに改良された 3D ガウス スプラッティング (3DGS) と呼ばれるレンダリング方法を提案しました。神経放射線場に基づく最先端の方法と比較して、3DGS は、高精度の 3D 初期化を必要とせずに、より高速なフレーム レートで高品質の画像をレンダリングできます。

ただし、3DGS はもともと静的なシーン用に設計されました。現在、動的シーンのレンダリングに使用できる、時間条件に基づいたガウス スプレーティング法を提案している人もいます。この方法は、以前に観察されたものを再生することしかできないため、新しい動きやこれまでに見たことのない動きを表現するのには適していません。

著者は、駆動された神経放射線場に基づいて、3D 人間の外観と変形をモデル化し、標準化された空間に配置しますが、放射線場ではなく 3D ガウスを使用します。ガウス スプラッティングでは、パフォーマンスが向上するだけでなく、カメラ レイ サンプリング ヒューリスティックを使用する必要がなくなります。

#残りの問題は、これらのケージの変形を引き起こす信号を定義することです。ドライバー駆動のアバターにおける現在の最先端テクノロジーは、RGB-D 画像や複数のカメラなどの高密度の入力信号を必要としますが、これらの方法は、伝送帯域幅が比較的低い状況には適さない可能性があります。この研究では、著者らは、骨格関節角度や四元数形式の 3D 顔のキーポイントなど、人間のポーズに基づいたよりコンパクトな入力を使用しています。

さまざまな体型、動き、服装 (親密な服装に限定されない) をカバーする 9 つの高品質マルチビュー シーケンスで個人固有のモデルをトレーニングすることで、後で次のことが可能になります。あらゆる被写体の新しい姿勢がその姿を動かします。

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルですメソッドの概要

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです##

  • 論文リンク: https://arxiv.org/pdf/2311.08581.pdf
  • プロジェクト リンク: https ://zielon.github.io/d3ga/

仮想キャラクターを動的にボリューム化する現在の方法は、変形空間から正準空間に点をマッピングするか、単に依存するかのどちらかです。フォワードマッピング。バック マッピングに基づく方法では、エラーが発生しやすいバック パスが必要であり、視点依存効果のモデル化に問題があるため、正準空間でエラーが蓄積する傾向があります。

そこで、著者はフォワードマッピングのみの方法を採用することにしました。 D3GA は 3DGS に基づいており、ニューラル表現とケージを通じて拡張され、仮想キャラクターの各動的部分の色と幾何学的形状をそれぞれモデル化します。

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです

D3GA は、3D ポーズ ϕ、顔埋め込み κ、視点 dk、および標準ケージ v (および自動的にデコードされた色特徴 hi) を使用して、最終的なレンダリングを生成します。 C ̄ と補助セグメンテーションは P ̄ をレンダリングします。左側の入力は、仮想キャラクター パーツごとに 3 つのネットワーク (ΨMLP、ΠMLP、ΓMLP) を通じて処理され、ケージ変位 Δv、ガウス変形 bi、qi、si、色/透明度 ci、oi が生成されます。

ケージ変形によって正準ガウス分布が変形された後、式 9 を介して最終画像にラスタライズされます。

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです

#実験結果

##SSIM、PSNR、および知覚指標 LPIPS の D3GA 評価他の指標についても。表 1 は、D3GA が LBS のみを使用する方式の中で PSNR と SSIM で最高のパフォーマンスを示し (つまり、フレームごとに 3D データをスキャンする必要がない)、これらの指標ですべての FFD 方式を上回り、BD に次いで 2 番目のパフォーマンスを示しています。 FFD は、トレーニング信号が貧弱でテスト画像がないにもかかわらず (DVA は 200 台のカメラすべてを使用してテストされました)。

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです

定性的な比較により、D3GA は他の最先端の方法よりも衣服をより適切にモデル化できることがわかります。特に Loose-スカートやスウェットパンツなどの衣服に合わせてください(写真4)。 FFD は自由変形メッシュの略で、LBS メッシュよりも豊富なトレーニング信号が含まれています (図 9)。

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです

AI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルです


#ボリュームベースの方法との比較これに比べて、著者の方法は仮想キャラクターの服装を分離することができ、服装も駆動可能である。図 5 は、特定の衣服登録モジュールを必要とせずに、骨の関節角度だけで個々の衣服の層を制御できることを示しています。


以上がAI研究も印象派から学べるのでしょうか?これらの本物そっくりの人々は、実際には 3D モデルですの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。

声明
この記事は51CTO.COMで複製されています。侵害がある場合は、admin@php.cn までご連絡ください。
为何在自动驾驶方面Gaussian Splatting如此受欢迎,开始放弃NeRF?为何在自动驾驶方面Gaussian Splatting如此受欢迎,开始放弃NeRF?Jan 17, 2024 pm 02:57 PM

写在前面&笔者的个人理解三维Gaussiansplatting(3DGS)是近年来在显式辐射场和计算机图形学领域出现的一种变革性技术。这种创新方法的特点是使用了数百万个3D高斯,这与神经辐射场(NeRF)方法有很大的不同,后者主要使用隐式的基于坐标的模型将空间坐标映射到像素值。3DGS凭借其明确的场景表示和可微分的渲染算法,不仅保证了实时渲染能力,而且引入了前所未有的控制和场景编辑水平。这将3DGS定位为下一代3D重建和表示的潜在游戏规则改变者。为此我们首次系统地概述了3DGS领域的最新发展和关

了解 Microsoft Teams 中的 3D Fluent 表情符号了解 Microsoft Teams 中的 3D Fluent 表情符号Apr 24, 2023 pm 10:28 PM

您一定记得,尤其是如果您是Teams用户,Microsoft在其以工作为重点的视频会议应用程序中添加了一批新的3DFluent表情符号。在微软去年宣布为Teams和Windows提供3D表情符号之后,该过程实际上已经为该平台更新了1800多个现有表情符号。这个宏伟的想法和为Teams推出的3DFluent表情符号更新首先是通过官方博客文章进行宣传的。最新的Teams更新为应用程序带来了FluentEmojis微软表示,更新后的1800表情符号将为我们每天

选择相机还是激光雷达?实现鲁棒的三维目标检测的最新综述选择相机还是激光雷达?实现鲁棒的三维目标检测的最新综述Jan 26, 2024 am 11:18 AM

0.写在前面&&个人理解自动驾驶系统依赖于先进的感知、决策和控制技术,通过使用各种传感器(如相机、激光雷达、雷达等)来感知周围环境,并利用算法和模型进行实时分析和决策。这使得车辆能够识别道路标志、检测和跟踪其他车辆、预测行人行为等,从而安全地操作和适应复杂的交通环境.这项技术目前引起了广泛的关注,并认为是未来交通领域的重要发展领域之一。但是,让自动驾驶变得困难的是弄清楚如何让汽车了解周围发生的事情。这需要自动驾驶系统中的三维物体检测算法可以准确地感知和描述周围环境中的物体,包括它们的位置、

Windows 11中的Paint 3D:下载、安装和使用指南Windows 11中的Paint 3D:下载、安装和使用指南Apr 26, 2023 am 11:28 AM

当八卦开始传播新的Windows11正在开发中时,每个微软用户都对新操作系统的外观以及它将带来什么感到好奇。经过猜测,Windows11就在这里。操作系统带有新的设计和功能更改。除了一些添加之外,它还带有功能弃用和删除。Windows11中不存在的功能之一是Paint3D。虽然它仍然提供经典的Paint,它对抽屉,涂鸦者和涂鸦者有好处,但它放弃了Paint3D,它提供了额外的功能,非常适合3D创作者。如果您正在寻找一些额外的功能,我们建议AutodeskMaya作为最好的3D设计软件。如

单卡30秒跑出虚拟3D老婆!Text to 3D生成看清毛孔细节的高精度数字人,无缝衔接Maya、Unity等制作工具单卡30秒跑出虚拟3D老婆!Text to 3D生成看清毛孔细节的高精度数字人,无缝衔接Maya、Unity等制作工具May 23, 2023 pm 02:34 PM

ChatGPT给AI行业注入一剂鸡血,一切曾经的不敢想,都成为如今的基操。正持续进击的Text-to-3D,就被视为继Diffusion(图像)和GPT(文字)后,AIGC领域的下一个前沿热点,得到了前所未有的关注度。这不,一款名为ChatAvatar的产品低调公测,火速收揽超70万浏览与关注,并登上抱抱脸周热门(Spacesoftheweek)。△ChatAvatar也将支持从AI生成的单视角/多视角原画生成3D风格化角色的Imageto3D技术,受到了广泛关注现行beta版本生成的3D模型,

自动驾驶3D视觉感知算法深度解读自动驾驶3D视觉感知算法深度解读Jun 02, 2023 pm 03:42 PM

对于自动驾驶应用来说,最终还是需要对3D场景进行感知。道理很简单,车辆不能靠着一张图像上得到感知结果来行驶,就算是人类司机也不能对着一张图像来开车。因为物体的距离和场景的和深度信息在2D感知结果上是体现不出来的,而这些信息才是自动驾驶系统对周围环境作出正确判断的关键。一般来说,自动驾驶车辆的视觉传感器(比如摄像头)安装在车身上方或者车内后视镜上。无论哪个位置,摄像头所得到的都是真实世界在透视视图(PerspectiveView)下的投影(世界坐标系到图像坐标系)。这种视图与人类的视觉系统很类似,

跨模态占据性知识的学习:使用渲染辅助蒸馏技术的RadOcc跨模态占据性知识的学习:使用渲染辅助蒸馏技术的RadOccJan 25, 2024 am 11:36 AM

原标题:Radocc:LearningCross-ModalityOccupancyKnowledgethroughRenderingAssistedDistillation论文链接:https://arxiv.org/pdf/2312.11829.pdf作者单位:FNii,CUHK-ShenzhenSSE,CUHK-Shenzhen华为诺亚方舟实验室会议:AAAI2024论文思路:3D占用预测是一项新兴任务,旨在使用多视图图像估计3D场景的占用状态和语义。然而,由于缺乏几何先验,基于图像的场景

《原神》:知名原神3d同人作者被捕《原神》:知名原神3d同人作者被捕Feb 15, 2024 am 09:51 AM

一些原神“奇怪”的关键词,在这两天很有关注度,明明搜索指数没啥变化,却不断有热议话题蹦窜。例如了龙王、钟离等“转变”立绘激增,虽在网络上疯传了一阵子,但是经过追溯发现这些是合理、常规的二创同人。如果单是这些,倒也翻不起多大的热度。按照一部分网友的说法,除了原神自身就有热度外,发现了一件格外醒目的事情:原神3d同人作者shirakami已经被捕。这引发了不小的热议。为什么被捕?关键词,原神3D动画。还是越过了线(就是你想的那种),再多就不能明说了。经过多方求证,以及新闻报道,确实有此事。自从去年发

See all articles

ホットAIツール

Undresser.AI Undress

Undresser.AI Undress

リアルなヌード写真を作成する AI 搭載アプリ

AI Clothes Remover

AI Clothes Remover

写真から衣服を削除するオンライン AI ツール。

Undress AI Tool

Undress AI Tool

脱衣画像を無料で

Clothoff.io

Clothoff.io

AI衣類リムーバー

AI Hentai Generator

AI Hentai Generator

AIヘンタイを無料で生成します。

ホットツール

AtomエディタMac版ダウンロード

AtomエディタMac版ダウンロード

最も人気のあるオープンソースエディター

ドリームウィーバー CS6

ドリームウィーバー CS6

ビジュアル Web 開発ツール

Dreamweaver Mac版

Dreamweaver Mac版

ビジュアル Web 開発ツール

メモ帳++7.3.1

メモ帳++7.3.1

使いやすく無料のコードエディター

MinGW - Minimalist GNU for Windows

MinGW - Minimalist GNU for Windows

このプロジェクトは osdn.net/projects/mingw に移行中です。引き続きそこでフォローしていただけます。 MinGW: GNU Compiler Collection (GCC) のネイティブ Windows ポートであり、ネイティブ Windows アプリケーションを構築するための自由に配布可能なインポート ライブラリとヘッダー ファイルであり、C99 機能をサポートする MSVC ランタイムの拡張機能が含まれています。すべての MinGW ソフトウェアは 64 ビット Windows プラットフォームで実行できます。