論文の概要: Max-Fusion U-Net for Multi-Modal Pathology Segmentation with Attention
and Dynamic Resampling
- arxiv url: http://arxiv.org/abs/2009.02569v1
- Date: Sat, 5 Sep 2020 17:24:23 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-21 21:11:32.036923
- Title: Max-Fusion U-Net for Multi-Modal Pathology Segmentation with Attention
and Dynamic Resampling
- Title(参考訳): マルチモーダル・パス・セグメンテーションのための最大融合U-Net
- Authors: Haochuan Jiang, Chengjia Wang, Agisilaos Chartsias, Sotirios A.
Tsaftaris
- Abstract要約: 関連するアルゴリズムの性能は、マルチモーダル情報の適切な融合によって大きく影響を受ける。
We present the Max-Fusion U-Net that achieve a improve pathology segmentation performance。
マルチシーケンスCMRデータセットを併用したMyoPS(Myocardial pathology segmentation)を用いて,本手法の評価を行った。
- 参考スコア(独自算出の注目度): 13.542898009730804
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Automatic segmentation of multi-sequence (multi-modal) cardiac MR (CMR)
images plays a significant role in diagnosis and management for a variety of
cardiac diseases. However, the performance of relevant algorithms is
significantly affected by the proper fusion of the multi-modal information.
Furthermore, particular diseases, such as myocardial infarction, display
irregular shapes on images and occupy small regions at random locations. These
facts make pathology segmentation of multi-modal CMR images a challenging task.
In this paper, we present the Max-Fusion U-Net that achieves improved pathology
segmentation performance given aligned multi-modal images of LGE, T2-weighted,
and bSSFP modalities. Specifically, modality-specific features are extracted by
dedicated encoders. Then they are fused with the pixel-wise maximum operator.
Together with the corresponding encoding features, these representations are
propagated to decoding layers with U-Net skip-connections. Furthermore, a
spatial-attention module is applied in the last decoding layer to encourage the
network to focus on those small semantically meaningful pathological regions
that trigger relatively high responses by the network neurons. We also use a
simple image patch extraction strategy to dynamically resample training
examples with varying spacial and batch sizes. With limited GPU memory, this
strategy reduces the imbalance of classes and forces the model to focus on
regions around the interested pathology. It further improves segmentation
accuracy and reduces the mis-classification of pathology. We evaluate our
methods using the Myocardial pathology segmentation (MyoPS) combining the
multi-sequence CMR dataset which involves three modalities. Extensive
experiments demonstrate the effectiveness of the proposed model which
outperforms the related baselines.
- Abstract(参考訳): マルチシーケンス(マルチモーダル)心筋mr(cmr)画像の自動分割は、様々な心疾患の診断と治療において重要な役割を担っている。
しかし、関連するアルゴリズムの性能は、マルチモーダル情報の適切な融合によって大きく影響を受ける。
さらに、心筋梗塞などの特定の疾患は画像に不規則な形状を示し、ランダムな場所で小さな領域を占有する。
これらの事実はマルチモーダルcmr画像の病理分節化を困難な課題にしている。
本稿では,LGE,T2重み付き,bSSFPモダリティのマルチモーダル画像に対して,病的セグメンテーション性能を向上させるMax-Fusion U-Netを提案する。
特に、モダリティ特有の特徴は専用エンコーダによって抽出される。
そして、ピクセルワイドの最大演算子と融合する。
対応するエンコーディング機能とともに、これらの表現はu-netスキップ接続でレイヤをデコードする。
さらに、最後の復号層に空間アテンションモジュールを適用し、ネットワークニューロンによる比較的高い応答を誘発する意味的に意味のある小さな病理領域に集中するようネットワークに促す。
また,簡単なイメージパッチ抽出戦略を用いて,空間サイズやバッチサイズの異なるトレーニングサンプルを動的にサンプル化する。
限られたGPUメモリでは、この戦略はクラスの不均衡を減らし、モデルが関心のある病理を取り巻く領域に集中させる。
セグメンテーションの精度をさらに向上し、病理の誤分類を減らす。
3つのモードを含むマルチシーケンスCMRデータセットを併用したMyoPS(Myocardial pathology segmentation)を用いて,本手法の評価を行った。
大規模な実験により,提案モデルの有効性が示された。
関連論文リスト
- Med-TTT: Vision Test-Time Training model for Medical Image Segmentation [5.318153305245246]
We propose Med-TTT, a visual backbone network with Test-Time Training layer。
このモデルは精度、感度、Dice係数の点で先行的な性能を達成する。
論文 参考訳(メタデータ) (2024-10-03T14:29:46Z) - Modality-agnostic Domain Generalizable Medical Image Segmentation by Multi-Frequency in Multi-Scale Attention [1.1155836879100416]
医用画像セグメンテーションのためのModality-Agnostic Domain Generalizable Network (MADGNet)を提案する。
MFMSAブロックは空間的特徴抽出の過程を洗練させる。
E-SDMは、深い監督を伴うマルチタスク学習における情報損失を軽減する。
論文 参考訳(メタデータ) (2024-05-10T07:34:36Z) - NeuroPictor: Refining fMRI-to-Image Reconstruction via Multi-individual Pretraining and Multi-level Modulation [55.51412454263856]
本稿では,fMRI信号を用いた拡散モデル生成過程を直接変調することを提案する。
様々な個人から約67,000 fMRI-imageペアのトレーニングを行うことで,fMRI-to-imageデコーディング能力に優れたモデルが得られた。
論文 参考訳(メタデータ) (2024-03-27T02:42:52Z) - Dual-scale Enhanced and Cross-generative Consistency Learning for Semi-supervised Medical Image Segmentation [49.57907601086494]
医用画像のセグメンテーションはコンピュータ支援診断において重要な役割を担っている。
半教師型医用画像(DEC-Seg)のための新しいDual-scale Enhanced and Cross-generative consistency learning frameworkを提案する。
論文 参考訳(メタデータ) (2023-12-26T12:56:31Z) - Convolutional neural network based on sparse graph attention mechanism
for MRI super-resolution [0.34410212782758043]
深層学習技術を用いた医用画像超解像(SR)再構成は、病変解析を強化し、診断効率と精度を向上させるために医師を支援する。
既存のディープラーニングベースのSR手法は、これらのモデルの表現能力を本質的に制限する畳み込みニューラルネットワーク(CNN)に依存している。
画像特徴抽出に複数の畳み込み演算子特徴抽出モジュール(MCO)を用いるAネットワークを提案する。
論文 参考訳(メタデータ) (2023-05-29T06:14:22Z) - Two-stage MR Image Segmentation Method for Brain Tumors based on
Attention Mechanism [27.08977505280394]
CycleGAN(CycleGAN)に基づく協調・空間的注意生成対向ネットワーク(CASP-GAN)を提案する。
ジェネレータの性能は、コーディネート・アテンション(CA)モジュールと空間アテンション(SA)モジュールを導入することで最適化される。
元の医用画像の構造情報と詳細な情報を抽出する能力は、所望の画像をより高品質に生成するのに役立つ。
論文 参考訳(メタデータ) (2023-04-17T08:34:41Z) - M$^{2}$SNet: Multi-scale in Multi-scale Subtraction Network for Medical
Image Segmentation [73.10707675345253]
医用画像から多様なセグメンテーションを仕上げるマルチスケールサブトラクションネットワーク(M$2$SNet)を提案する。
本手法は,4つの異なる医用画像セグメンテーションタスクの11つのデータセットに対して,異なる評価基準の下で,ほとんどの最先端手法に対して好意的に機能する。
論文 参考訳(メタデータ) (2023-03-20T06:26:49Z) - RetiFluidNet: A Self-Adaptive and Multi-Attention Deep Convolutional
Network for Retinal OCT Fluid Segmentation [3.57686754209902]
OCTガイド下治療には網膜液の定量化が必要である。
RetiFluidNetと呼ばれる新しい畳み込みニューラルアーキテクチャは、多クラス網膜流体セグメンテーションのために提案されている。
モデルは、テクスチャ、コンテキスト、エッジといった特徴の階層的な表現学習の恩恵を受ける。
論文 参考訳(メタデータ) (2022-09-26T07:18:00Z) - Modality Completion via Gaussian Process Prior Variational Autoencoders
for Multi-Modal Glioma Segmentation [75.58395328700821]
本稿では,患者スキャンに欠落するサブモダリティを1つ以上のインプットするために,MGP-VAE(Multi-modal Gaussian Process Prior Variational Autoencoder)を提案する。
MGP-VAEは、変分オートエンコーダ(VAE)に先立ってガウス過程(GP)を利用して、被験者/患者およびサブモダリティ相関を利用することができる。
4つのサブモダリティのうち2つ、または3つが欠落している脳腫瘍に対するMGP-VAEの適用性を示す。
論文 参考訳(メタデータ) (2021-07-07T19:06:34Z) - Few-shot Medical Image Segmentation using a Global Correlation Network
with Discriminative Embedding [60.89561661441736]
医療画像分割のための新しい手法を提案する。
深層畳み込みネットワークを用いた数ショット画像セグメンタを構築します。
深層埋め込みの識別性を高め,同一クラスの特徴領域のクラスタリングを促進する。
論文 参考訳(メタデータ) (2020-12-10T04:01:07Z) - Unpaired Multi-modal Segmentation via Knowledge Distillation [77.39798870702174]
本稿では,不対向画像分割のための新しい学習手法を提案する。
提案手法では,CTおよびMRI間での畳み込みカーネルの共有により,ネットワークパラメータを多用する。
我々は2つの多クラスセグメンテーション問題に対するアプローチを広範囲に検証した。
論文 参考訳(メタデータ) (2020-01-06T20:03:17Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。