論文の概要: 3D Mitochondria Instance Segmentation with Spatio-Temporal Transformers
- arxiv url: http://arxiv.org/abs/2303.12073v1
- Date: Tue, 21 Mar 2023 17:58:49 GMT
- ステータス: 処理完了
- システム内更新日: 2023-03-22 13:43:43.376063
- Title: 3D Mitochondria Instance Segmentation with Spatio-Temporal Transformers
- Title(参考訳): 時空間トランスフォーマーを用いたミトコンドリア3次元領域分割
- Authors: Omkar Thawakar, Rao Muhammad Anwer, Jorma Laaksonen, Orly Reiner,
Mubarak Shah, Fahad Shahbaz Khan
- Abstract要約: 本稿では,空間的および時間的注意を並列に効率的に計算するハイブリッドエンコーダデコーダフレームワークを提案する。
また,ミトコンドリアインスタンスの領域を背景から支援する訓練中に,意味的クラッタ・バックグラウンドの逆行性障害も導入した。
- 参考スコア(独自算出の注目度): 101.44668514239959
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Accurate 3D mitochondria instance segmentation in electron microscopy (EM) is
a challenging problem and serves as a prerequisite to empirically analyze their
distributions and morphology. Most existing approaches employ 3D convolutions
to obtain representative features. However, these convolution-based approaches
struggle to effectively capture long-range dependencies in the volume
mitochondria data, due to their limited local receptive field. To address this,
we propose a hybrid encoder-decoder framework based on a split spatio-temporal
attention module that efficiently computes spatial and temporal self-attentions
in parallel, which are later fused through a deformable convolution. Further,
we introduce a semantic foreground-background adversarial loss during training
that aids in delineating the region of mitochondria instances from the
background clutter. Our extensive experiments on three benchmarks, Lucchi,
MitoEM-R and MitoEM-H, reveal the benefits of the proposed contributions
achieving state-of-the-art results on all three datasets. Our code and models
are available at https://github.com/OmkarThawakar/STT-UNET.
- Abstract(参考訳): 電子顕微鏡(em)におけるミトコンドリアの正確な3次元領域分割は困難な問題であり、その分布と形態を実証的に解析する前提条件となっている。
既存のアプローチのほとんどは、代表的特徴を得るために3次元畳み込みを用いる。
しかし、これらの畳み込みに基づくアプローチは、局所受容野が限られたため、ミトコンドリアの容積データの長距離依存を効果的に捉えるのに苦労する。
そこで本稿では,空間的および時間的自己アテンションを並列に効率的に計算し,後に変形可能な畳み込みによって融合する分割時空間アテンションモジュールに基づくハイブリッドエンコーダ・デコーダフレームワークを提案する。
さらに,ミトコンドリアインスタンスの領域を背景クラッタから引き離すのに役立つトレーニング中の前景-後景の敵意的損失について紹介する。
Lucchi、MitoEM-R、MitoEM-Hの3つのベンチマークに関する広範な実験では、提案されたコントリビューションの利点が示され、3つのデータセットで最先端の結果が得られた。
私たちのコードとモデルはhttps://github.com/omkarthawakar/stt-unetで利用可能です。
関連論文リスト
- EM-GANSim: Real-time and Accurate EM Simulation Using Conditional GANs for 3D Indoor Scenes [55.2480439325792]
実時間電磁伝搬のための新しい機械学習手法(EM-GANSim)を提案する。
実際には、3D屋内環境のあらゆる場所で数ミリ秒で信号強度を計算することができる。
論文 参考訳(メタデータ) (2024-05-27T17:19:02Z) - Leveraging Frequency Domain Learning in 3D Vessel Segmentation [50.54833091336862]
本研究では,Fourier領域学習を3次元階層分割モデルにおけるマルチスケール畳み込みカーネルの代用として活用する。
管状血管分割作業において,新しいネットワークは顕著なサイス性能(ASACA500が84.37%,ImageCASが80.32%)を示した。
論文 参考訳(メタデータ) (2024-01-11T19:07:58Z) - E2ENet: Dynamic Sparse Feature Fusion for Accurate and Efficient 3D
Medical Image Segmentation [36.367368163120794]
E2ENet(Efficient to Efficient Network)と呼ばれる3次元医用画像分割モデルを提案する。
パラメトリックと計算効率の2つの設計が組み込まれている。
さまざまなリソース制約に対して、正確性と効率性のトレードオフを一貫して達成します。
論文 参考訳(メタデータ) (2023-12-07T22:13:37Z) - UNETR++: Delving into Efficient and Accurate 3D Medical Image Segmentation [93.88170217725805]
本稿では,高画質なセグメンテーションマスクと,パラメータ,計算コスト,推論速度の両面での効率性を提供するUNETR++という3次元医用画像セグメンテーション手法を提案する。
我々の設計の核となるのは、空間的およびチャネル的な識別的特徴を効率的に学習する、新しい効率的な対注意ブロック(EPA)の導入である。
Synapse, BTCV, ACDC, BRaTs, Decathlon-Lungの5つのベンチマークで評価した結果, 効率と精度の両面で, コントリビューションの有効性が示された。
論文 参考訳(メタデータ) (2022-12-08T18:59:57Z) - Semi-Supervised Segmentation of Mitochondria from Electron Microscopy
Images Using Spatial Continuity [3.631638087834872]
ミトコンドリアの構造的・形態的・文脈的情報の空間的連続性を利用してミトコンドリアをセグメント化する半教師付き深層学習モデルを提案する。
我々のモデルは、最先端の完全教師付きモデルと同じような性能を達成するが、アノテーション付きトレーニングデータの20%しか必要としない。
論文 参考訳(メタデータ) (2022-06-06T06:52:19Z) - MISSU: 3D Medical Image Segmentation via Self-distilling TransUNet [55.16833099336073]
医用画像セグメンテーションのためのトランスフォーマーベースUNetを提案する。
グローバルな意味情報と局所的な空間的詳細特徴を同時に学習する。
MISSUは従来の最先端手法よりも優れた性能を発揮する。
論文 参考訳(メタデータ) (2022-06-02T07:38:53Z) - A persistent homology-based topological loss for CNN-based multi-class
segmentation of CMR [5.898114915426535]
心臓磁気共鳴(CMR)画像のマルチクラスセグメンテーションは、既知の構造と構成を持つ解剖学的構成要素にデータの分離を求める。
最も一般的なCNNベースの手法は、解剖を特徴付ける空間的に拡張された特徴を無視した画素ワイズ損失関数を用いて最適化されている。
これらのアプローチは、全てのクラスラベルとクラスラベルペアのリッチなトポロジカル記述を構築することで、マルチクラスセグメンテーションのタスクに拡張する。
論文 参考訳(メタデータ) (2021-07-27T09:21:38Z) - Advanced Deep Networks for 3D Mitochondria Instance Segmentation [46.295601731565725]
ResUNet-RとResUNet-Hという2つの高度なディープネットワークを提案し、ラットとヒトのサンプルから3Dミトコンドリアインスタンスのセグメンテーションを行います。
具体的には,単純かつ効果的な異方性畳み込みブロックを設計し,マルチスケールのトレーニング戦略を展開し,セグメンテーション性能を向上させる。
論文 参考訳(メタデータ) (2021-04-16T08:27:44Z) - HIVE-Net: Centerline-Aware HIerarchical View-Ensemble Convolutional
Network for Mitochondria Segmentation in EM Images [3.1498833540989413]
より効率的な2次元畳み込みを用いた3次元空間コンテキスト学習のための新しい階層型ビューアンサンブル畳み込み(HVEC)を提案する。
提案手法は, 精度と画質は良好だが, モデルサイズは大幅に小さく, 最先端の手法に対して好適に機能する。
論文 参考訳(メタデータ) (2021-01-08T06:56:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。