論文の概要: 3DQD: Generalized Deep 3D Shape Prior via Part-Discretized Diffusion
Process
- arxiv url: http://arxiv.org/abs/2303.10406v1
- Date: Sat, 18 Mar 2023 12:50:29 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-21 19:37:54.750935
- Title: 3DQD: Generalized Deep 3D Shape Prior via Part-Discretized Diffusion
Process
- Title(参考訳): 3DQD: 部分分散拡散プロセスによる3次元形状の一般化
- Authors: Yuhan Li, Yishun Dou, Xuanhong Chen, Bingbing Ni, Yilin Sun, Yutian
Liu, Fuzhen Wang
- Abstract要約: 複数の3次元タスクに適した,一般化された3次元形状生成モデルを開発した。
設計は、提案した3次元形状先行モデルに高忠実度、多彩な特徴と、相互モダリティアライメントの能力を併用する。
- 参考スコア(独自算出の注目度): 32.3773514247982
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We develop a generalized 3D shape generation prior model, tailored for
multiple 3D tasks including unconditional shape generation, point cloud
completion, and cross-modality shape generation, etc. On one hand, to precisely
capture local fine detailed shape information, a vector quantized variational
autoencoder (VQ-VAE) is utilized to index local geometry from a compactly
learned codebook based on a broad set of task training data. On the other hand,
a discrete diffusion generator is introduced to model the inherent structural
dependencies among different tokens. In the meantime, a multi-frequency fusion
module (MFM) is developed to suppress high-frequency shape feature
fluctuations, guided by multi-frequency contextual information. The above
designs jointly equip our proposed 3D shape prior model with high-fidelity,
diverse features as well as the capability of cross-modality alignment, and
extensive experiments have demonstrated superior performances on various 3D
shape generation tasks.
- Abstract(参考訳): 本研究では,無条件形状生成,ポイントクラウド完成,クロスモダリティ形状生成などを含む複数の3次元タスク用に調整した,一般化された3次元形状生成事前モデルを開発した。
一方、局所的な詳細な形状情報を正確に把握するために、ベクトル量子化変分オートエンコーダ(VQ-VAE)を用いて、幅広いタスクトレーニングデータに基づいて、コンパクトに学習されたコードブックから局所幾何学をインデックスする。
一方、離散拡散生成器は、異なるトークン間の固有の構造依存性をモデル化するために導入された。
一方,多周波環境情報によって誘導される高周波形状特徴変動を抑制するために,多周波融合モジュール(mfm)を開発した。
上記の設計は,提案する3次元形状先行モデルと高忠実度,多彩な特徴,およびクロスモダリティアライメントの能力を組み合わせたものであるとともに,様々な3次元形状生成タスクにおいて優れた性能を示す。
関連論文リスト
- DetailGen3D: Generative 3D Geometry Enhancement via Data-Dependent Flow [44.72037991063735]
DetailGen3Dは、生成された3D形状を強化するために特別に設計されたジェネレーティブなアプローチである。
我々の重要な洞察は、潜在空間におけるデータ依存フローを通して、粗大から細小への変換を直接モデル化することである。
改質時に正確な空間対応を確保するためのトークンマッチング戦略を導入する。
論文 参考訳(メタデータ) (2024-11-25T17:08:17Z) - GaussianAnything: Interactive Point Cloud Latent Diffusion for 3D Generation [75.39457097832113]
本稿では,インタラクティブなポイントクラウド構造ラテント空間を備えたスケーラブルで高品質な3D生成を実現する,新しい3D生成フレームワークを提案する。
本フレームワークでは,複数ビューのRGB-D(epth)-N(ormal)レンダリングを入力として使用する変分オートエンコーダを,3次元形状情報を保存する独自のラテント空間設計を用いて構成する。
提案手法であるGaussianAnythingは,複数モード条件付き3D生成をサポートし,ポイントクラウド,キャプション,シングル/マルチビュー画像入力を可能にする。
論文 参考訳(メタデータ) (2024-11-12T18:59:32Z) - NeuSDFusion: A Spatial-Aware Generative Model for 3D Shape Completion, Reconstruction, and Generation [52.772319840580074]
3D形状生成は、特定の条件や制約に固執する革新的な3Dコンテンツを作成することを目的としている。
既存の方法は、しばしば3Dの形状を局所化されたコンポーネントの列に分解し、各要素を分離して扱う。
本研究では2次元平面表現を利用した空間認識型3次元形状生成フレームワークを提案する。
論文 参考訳(メタデータ) (2024-03-27T04:09:34Z) - Pushing the Limits of 3D Shape Generation at Scale [65.24420181727615]
我々は、前例のない次元に拡大することで、3次元形状生成において画期的なブレークスルーを示す。
現在までに最大の3次元形状生成モデルとしてArgus-3Dが確立されている。
論文 参考訳(メタデータ) (2023-06-20T13:01:19Z) - Neural Wavelet-domain Diffusion for 3D Shape Generation, Inversion, and
Manipulation [54.09274684734721]
本稿では,ウェーブレット領域における連続的な暗黙表現の直接生成モデルを用いて,3次元形状の生成,反転,操作を行う新しい手法を提案する。
具体的には、1対の粗い係数と細部係数の体積を持つコンパクトなウェーブレット表現を提案し、トランケートされた符号付き距離関数とマルチスケールの生体直交ウェーブレットを介して3次元形状を暗黙的に表現する。
エンコーダネットワークを共同でトレーニングすることで,形状を反転させる潜在空間を学習することができる。
論文 参考訳(メタデータ) (2023-02-01T02:47:53Z) - Neural Wavelet-domain Diffusion for 3D Shape Generation [52.038346313823524]
本稿では,ウェーブレット領域における連続的暗黙表現の直接生成モデリングを可能にする3次元形状生成の新しい手法を提案する。
具体的には、1対の粗い係数と細部係数の体積を持つコンパクトなウェーブレット表現を提案し、トランケートされた符号付き距離関数とマルチスケールの生体直交ウェーブレットを介して3次元形状を暗黙的に表現する。
論文 参考訳(メタデータ) (2022-09-19T02:51:48Z) - Learning to Generate 3D Shapes from a Single Example [28.707149807472685]
本稿では,入力形状の幾何学的特徴を空間的範囲にわたって捉えるために,マルチスケールのGANモデルを提案する。
我々は、外部の監督や手動のアノテーションを必要とせずに、基準形状のボクセルピラミッドで生成モデルを訓練する。
結果の形状は異なるスケールで変化を示し、同時に基準形状のグローバルな構造を保持する。
論文 参考訳(メタデータ) (2022-08-05T01:05:32Z) - Point Cloud Generation with Continuous Conditioning [2.9238500578557303]
本稿では,連続パラメータを条件とした3次元点雲形状を生成するGAN(Generative Adversarial Network)を提案する。
模範的なアプリケーションでは、これを生成プロセスのガイドとして使用し、カスタマイズ可能な形状の3Dオブジェクトを作成します。
論文 参考訳(メタデータ) (2022-02-17T09:05:10Z) - SP-GAN: Sphere-Guided 3D Shape Generation and Manipulation [50.53931728235875]
点雲の形で3次元形状を直接合成するための新しい教師なし球誘導生成モデルSP-GANを提案する。
既存のモデルと比較して、SP-GANは多種多様な高品質な形状を詳細に合成することができる。
論文 参考訳(メタデータ) (2021-08-10T06:49:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。