論文の概要: Feature Disentanglement in generating three-dimensional structure from
two-dimensional slice with sliceGAN
- arxiv url: http://arxiv.org/abs/2105.00194v1
- Date: Sat, 1 May 2021 08:29:33 GMT
- ステータス: 処理完了
- システム内更新日: 2021-05-05 09:32:53.033949
- Title: Feature Disentanglement in generating three-dimensional structure from
two-dimensional slice with sliceGAN
- Title(参考訳): スライスGANを用いた2次元スライスからの3次元構造生成における特徴分散
- Authors: Hyungjin Chung and Jong Chul Ye
- Abstract要約: スライスGANは,2次元スライス(2次元スライス)の微細構造特性を捉えるために,GAN(Generative Adversarial Network)を用いた新しい手法を提案した。
スライスGANをAdaINと組み合わせて、モデルを機能を切り離し、合成を制御することができるようにします。
- 参考スコア(独自算出の注目度): 35.3148116010546
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Deep generative models are known to be able to model arbitrary probability
distributions. Among these, a recent deep generative model, dubbed sliceGAN,
proposed a new way of using the generative adversarial network (GAN) to capture
the micro-structural characteristics of a two-dimensional (2D) slice and
generate three-dimensional (3D) volumes with similar properties. While 3D
micrographs are largely beneficial in simulating diverse material behavior,
they are often much harder to obtain than their 2D counterparts. Hence,
sliceGAN opens up many interesting directions of research by learning the
representative distribution from 2D slices, and transferring the learned
knowledge to generate arbitrary 3D volumes. However, one limitation of sliceGAN
is that latent space steering is not possible. Hence, we combine sliceGAN with
AdaIN to endow the model with the ability to disentangle the features and
control the synthesis.
- Abstract(参考訳): 深い生成モデルは任意の確率分布をモデル化できることが知られている。
これらのうち、最近の深層生成モデルであるslicganは、2次元(2d)スライスの微細構造特性を捉えるためにgan(generative adversarial network)を使い、同様の性質を持つ3次元ボリュームを生成する新しい方法を提案した。
3Dマイクログラフは様々な物質の挙動をシミュレートするのに大いに有用であるが、しばしば2D画像よりも入手が困難である。
そこで,スライスGANは2次元スライスから代表分布を学習し,学習知識を移譲して任意の3次元ボリュームを生成することにより,多くの興味深い研究方向を開く。
しかし、スライスGANの1つの制限は、潜在空間ステアリングが不可能であることである。
したがって、SliceGANとAdaINを組み合わせることで、モデルに特徴を絡めて合成を制御することができる。
関連論文リスト
- Repeat and Concatenate: 2D to 3D Image Translation with 3D to 3D Generative Modeling [14.341099905684844]
本稿では,2次元X線と3次元CTライクな再構成が可能な2次元-3次元画像変換法について,簡単な手法で検討する。
我々は,潜伏空間内の複数の2次元ビューにまたがる情報を統合する既存のアプローチが,潜伏符号化中に貴重な信号情報を失うことを観察する。代わりに,2次元ビューを高チャネルの3次元ボリュームに繰り返して,簡単な3次元から3次元生成モデル問題として3次元再構成課題にアプローチする。
この方法では、再構成された3Dボリュームが、2D入力から貴重な情報を保持でき、Swin Uのチャネル状態間で渡される。
論文 参考訳(メタデータ) (2024-06-26T15:18:20Z) - GeoGS3D: Single-view 3D Reconstruction via Geometric-aware Diffusion Model and Gaussian Splatting [81.03553265684184]
単視点画像から詳細な3Dオブジェクトを再構成するフレームワークであるGeoGS3Dを紹介する。
本稿では,GDS(Gaussian Divergence Significance)という新しい指標を提案する。
実験により、GeoGS3Dはビュー間で高い一貫性を持つ画像を生成し、高品質な3Dオブジェクトを再構成することを示した。
論文 参考訳(メタデータ) (2024-03-15T12:24:36Z) - Spatiotemporal Modeling Encounters 3D Medical Image Analysis:
Slice-Shift UNet with Multi-View Fusion [0.0]
本稿では,2次元CNNにおける3次元特徴をエンコードする2次元モデルSlice SHift UNetを提案する。
より正確にマルチビュー機能は、ボリュームの3次元平面に沿って2次元の畳み込みを実行することで協調的に学習される。
提案手法の有効性は,多モード腹部多臓器軸 (AMOS) と Cranial Vault (BTCV) データセットを越えたマルチアトラスラベリング (Multi-Atlas Labeling Beyond the Cranial Vault) で検証した。
論文 参考訳(メタデータ) (2023-07-24T14:53:23Z) - Learning Versatile 3D Shape Generation with Improved AR Models [91.87115744375052]
自己回帰(AR)モデルはグリッド空間の関節分布をモデル化することにより2次元画像生成において印象的な結果を得た。
本稿では3次元形状生成のための改良された自己回帰モデル(ImAM)を提案する。
論文 参考訳(メタデータ) (2023-03-26T12:03:18Z) - Hilbert Distillation for Cross-Dimensionality Networks [23.700464344728424]
3D畳み込みニューラルネットワークは、ビデオや医療画像などのデータ処理において、優れたパフォーマンスを示している。
しかし、3Dネットワークを利用した競合性能は計算コストが大きい。
本稿では,2次元ネットワークの性能向上を図るため,ヒルベルト曲線を用いた新しいクロス次元蒸留手法を提案する。
論文 参考訳(メタデータ) (2022-11-08T06:25:06Z) - Deep Generative Models on 3D Representations: A Survey [81.73385191402419]
生成モデルは、新しいインスタンスを生成することによって観測データの分布を学習することを目的としている。
最近、研究者は焦点を2Dから3Dにシフトし始めた。
3Dデータの表現は、非常に大きな課題をもたらします。
論文 参考訳(メタデータ) (2022-10-27T17:59:50Z) - Learning to Generate 3D Shapes from a Single Example [28.707149807472685]
本稿では,入力形状の幾何学的特徴を空間的範囲にわたって捉えるために,マルチスケールのGANモデルを提案する。
我々は、外部の監督や手動のアノテーションを必要とせずに、基準形状のボクセルピラミッドで生成モデルを訓練する。
結果の形状は異なるスケールで変化を示し、同時に基準形状のグローバルな構造を保持する。
論文 参考訳(メタデータ) (2022-08-05T01:05:32Z) - Cylindrical and Asymmetrical 3D Convolution Networks for LiDAR-based
Perception [122.53774221136193]
運転時のLiDARに基づく認識のための最先端の手法は、しばしば点雲を2D空間に投影し、2D畳み込みによって処理する。
自然な対策として、3Dボクセル化と3D畳み込みネットワークを利用する方法がある。
本研究では,3次元幾何学的パターンを探索するために,円筒状分割と非対称な3次元畳み込みネットワークを設計する,屋外LiDARセグメンテーションのための新しいフレームワークを提案する。
論文 参考訳(メタデータ) (2021-09-12T06:25:11Z) - Cylindrical and Asymmetrical 3D Convolution Networks for LiDAR
Segmentation [81.02742110604161]
大規模運転シーンのLiDARセグメンテーションのための最先端の手法は、しばしば点雲を2次元空間に投影し、2D畳み込みによって処理する。
そこで我々は,3次元幾何学的パタンを探索するために,円筒分割と非対称な3次元畳み込みネットワークを設計する,屋外LiDARセグメンテーションのための新しいフレームワークを提案する。
提案手法はセマンティックKITTIのリーダーボードにおいて第1位を獲得し,既存のnuScenesの手法を約4%のマージンで上回っている。
論文 参考訳(メタデータ) (2020-11-19T18:53:11Z) - Modelling the Distribution of 3D Brain MRI using a 2D Slice VAE [66.63629641650572]
本研究では,2次元スライスVAEとガウスモデルを組み合わせた3次元MR脳の体積分布をモデル化する手法を提案する。
また,本研究では,脳解剖学に適合するセグメンテーションの精度を定量的に評価する新たなボリューム評価手法を提案する。
論文 参考訳(メタデータ) (2020-07-09T13:23:15Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。