論文の概要: Euler Characteristic Transform Based Topological Loss for Reconstructing
3D Images from Single 2D Slices
- arxiv url: http://arxiv.org/abs/2303.05286v1
- Date: Wed, 8 Mar 2023 02:12:17 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-10 14:40:57.678007
- Title: Euler Characteristic Transform Based Topological Loss for Reconstructing
3D Images from Single 2D Slices
- Title(参考訳): ユーラー特性変換に基づく2次元スライスからの3次元画像再構成
- Authors: Kalyan Varma Nadimpalli, Amit Chattopadhyay and Bastian Rieck
- Abstract要約: オイラー特性変換に基づく新しい位相損失関数を提案する。
この損失は、任意のニューラルネットワークの、限られたデータの状態におけるより良い再構築に向けた最適化を支援するために、誘導バイアスとして使用できる。
現状の形状復元モデルであるSHAPRに組み込んだ損失関数の有効性を示す。
- 参考スコア(独自算出の注目度): 9.646922337783137
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: The computer vision task of reconstructing 3D images, i.e., shapes, from
their single 2D image slices is extremely challenging, more so in the regime of
limited data. Deep learning models typically optimize geometric loss functions,
which may lead to poor reconstructions as they ignore the structural properties
of the shape. To tackle this, we propose a novel topological loss function
based on the Euler Characteristic Transform. This loss can be used as an
inductive bias to aid the optimization of any neural network toward better
reconstructions in the regime of limited data. We show the effectiveness of the
proposed loss function by incorporating it into SHAPR, a state-of-the-art shape
reconstruction model, and test it on two benchmark datasets, viz., Red Blood
Cells and Nuclei datasets. We also show a favourable property, namely
injectivity and discuss the stability of the topological loss function based on
the Euler Characteristic Transform.
- Abstract(参考訳): 1枚の2D画像スライスから3D画像、すなわち形状を再構成するコンピュータビジョンタスクは、制限されたデータの状態において非常に難しい。
深層学習モデルは通常、幾何学的損失関数を最適化するが、形状の構造的性質を無視して再構成が不十分になる可能性がある。
そこで本研究では,オイラー特性変換に基づく新しい位相的損失関数を提案する。
この損失をインダクティブバイアスとして使用することで、制限されたデータのレコンストラクションにおいて、任意のニューラルネットワークのより良い再構築に向けた最適化を支援することができる。
最先端の形状復元モデルであるSHAPRに組み込んだ損失関数の有効性を検証し,2つのベンチマークデータセット(viz., Red Blood Cells, Nuclei)で検証した。
また,優占性,すなわち射影性を示し,オイラー特性変換に基づくトポロジカル損失関数の安定性について議論する。
関連論文リスト
- T-Pixel2Mesh: Combining Global and Local Transformer for 3D Mesh Generation from a Single Image [84.08705684778666]
本稿では,P2Mの粗大なアプローチにインスパイアされたトランスフォーマーブーストアーキテクチャT-Pixel2Meshを提案する。
具体的には,大域変換器を用いて局所的な形状を制御し,局所的な幾何学的詳細を洗練させる。
ShapeNetの実験では最先端の性能が実証され,実世界のデータでは一般化能力が示された。
論文 参考訳(メタデータ) (2024-03-20T15:14:22Z) - Neural Poisson Surface Reconstruction: Resolution-Agnostic Shape
Reconstruction from Point Clouds [53.02191521770926]
我々は,3次元形状を点から復元するという課題に対処する形状再構成アーキテクチャであるニューラルポアソン表面再構成(nPSR)を導入する。
nPSRには2つの大きな利点がある: まず、高分解能評価において同等の性能を達成しつつ、低分解能データの効率的なトレーニングを可能にする。
全体として、ニューラル・ポアソン表面の再構成は、形状再構成における古典的なディープニューラルネットワークの限界を改良するだけでなく、再構築品質、走行時間、分解能非依存の観点からも優れた結果が得られる。
論文 参考訳(メタデータ) (2023-08-03T13:56:07Z) - LIST: Learning Implicitly from Spatial Transformers for Single-View 3D
Reconstruction [5.107705550575662]
Listは、局所的およびグローバルな画像特徴を活用して、単一の画像から3Dオブジェクトの幾何学的および位相的構造を再構築する、新しいニューラルネットワークである。
合成画像と実世界の画像から3Dオブジェクトを再構成する際のモデルの有用性を示す。
論文 参考訳(メタデータ) (2023-07-23T01:01:27Z) - Neural Textured Deformable Meshes for Robust Analysis-by-Synthesis [17.920305227880245]
本稿では, 近似解析を用いた三重視覚タスクを一貫した方法で定式化する。
実世界の画像で評価すると、従来のニューラルネットワークよりも、我々の分析バイシンセシスの方がはるかに堅牢であることが示される。
論文 参考訳(メタデータ) (2023-05-31T18:45:02Z) - Curvature regularization for Non-line-of-sight Imaging from
Under-sampled Data [5.591221518341613]
非視線イメージング(NLOS)は、視線で測定されたデータから3次元の隠れたシーンを再構築することを目的としている。
曲率正規化に基づく新しいNLOS再構成モデルを提案する。
提案したアルゴリズムを,合成データセットと実データセットの両方で評価する。
論文 参考訳(メタデータ) (2023-01-01T14:10:43Z) - Capturing Shape Information with Multi-Scale Topological Loss Terms for
3D Reconstruction [7.323706635751351]
本稿では, 連結成分, サイクル, 空隙などの多次元位相特徴を再構成損失に含め, 幾何学的形状情報を補完する手法を提案する。
提案手法は, 3次元体積データから3次元形状データから位相特性を計算し, 最適輸送距離を用いて復元過程を導出する。
SHAPRは2次元顕微鏡画像から個々の細胞の3次元細胞形状を予測するモデルである。
論文 参考訳(メタデータ) (2022-03-03T13:18:21Z) - Neural Parts: Learning Expressive 3D Shape Abstractions with Invertible
Neural Networks [118.20778308823779]
Invertible Neural Network (INN) を用いてプリミティブを定義する新しい3次元プリミティブ表現を提案する。
私たちのモデルは、部品レベルの監督なしに3Dオブジェクトを意味的に一貫した部品配置に解析することを学びます。
論文 参考訳(メタデータ) (2021-03-18T17:59:31Z) - Secrets of 3D Implicit Object Shape Reconstruction in the Wild [92.5554695397653]
コンピュータビジョン、ロボティクス、グラフィックスの様々な用途において、高精細な3Dオブジェクトをスパースから再構築することは重要です。
最近の神経暗黙的モデリング法は、合成データセットまたは高密度データセットで有望な結果を示す。
しかし、粗末でノイズの多い実世界のデータではパフォーマンスが悪い。
本論文では, 一般的な神経暗黙モデルの性能低下の根本原因を解析する。
論文 参考訳(メタデータ) (2021-01-18T03:24:48Z) - Learning Deformable Tetrahedral Meshes for 3D Reconstruction [78.0514377738632]
学習に基づく3次元再構成に対応する3次元形状表現は、機械学習とコンピュータグラフィックスにおいてオープンな問題である。
ニューラル3D再構成に関するこれまでの研究は、利点だけでなく、ポイントクラウド、ボクセル、サーフェスメッシュ、暗黙の関数表現といった制限も示していた。
Deformable Tetrahedral Meshes (DefTet) を, ボリューム四面体メッシュを再構成問題に用いるパラメータ化として導入する。
論文 参考訳(メタデータ) (2020-11-03T02:57:01Z) - Implicit Functions in Feature Space for 3D Shape Reconstruction and
Completion [53.885984328273686]
Implicit Feature Networks (IF-Nets) は連続的な出力を提供し、複数のトポロジを扱える。
IF-NetsはShapeNetにおける3次元オブジェクト再構成における先行作業よりも明らかに優れており、より正確な3次元人間の再構成が得られる。
論文 参考訳(メタデータ) (2020-03-03T11:14:29Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。