論文の概要: CoMoTo: Unpaired Cross-Modal Lesion Distillation Improves Breast Lesion Detection in Tomosynthesis
- arxiv url: http://arxiv.org/abs/2407.17620v1
- Date: Wed, 24 Jul 2024 20:17:05 GMT
- ステータス: 処理完了
- システム内更新日: 2024-07-26 15:57:05.155249
- Title: CoMoTo: Unpaired Cross-Modal Lesion Distillation Improves Breast Lesion Detection in Tomosynthesis
- Title(参考訳): CoMoTo:生合成における不対向型クロスモーダル病変蒸留による乳房病変の検出の改善
- Authors: Muhammad Alberb, Marawan Elbatel, Aya Elgebaly, Ricardo Montoya-del-Angel, Xiaomeng Li, Robert Martí,
- Abstract要約: 本稿では, 病変検出の実用性を向上させるための新しいフレームワークであるCoMoToを提案する。
病変特異的知識蒸留(LsKD)とイントラモーダルポイントアライメント(ImPA)の2つの新しいコンポーネントを提案する。
総合評価の結果,CoMoToは従来の事前学習や画像レベルのKDよりも優れており,低データ環境下での平均感度が7%向上していることがわかった。
- 参考スコア(独自算出の注目度): 4.371794161279236
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Digital Breast Tomosynthesis (DBT) is an advanced breast imaging modality that offers superior lesion detection accuracy compared to conventional mammography, albeit at the trade-off of longer reading time. Accelerating lesion detection from DBT using deep learning is hindered by limited data availability and huge annotation costs. A possible solution to this issue could be to leverage the information provided by a more widely available modality, such as mammography, to enhance DBT lesion detection. In this paper, we present a novel framework, CoMoTo, for improving lesion detection in DBT. Our framework leverages unpaired mammography data to enhance the training of a DBT model, improving practicality by eliminating the need for mammography during inference. Specifically, we propose two novel components, Lesion-specific Knowledge Distillation (LsKD) and Intra-modal Point Alignment (ImPA). LsKD selectively distills lesion features from a mammography teacher model to a DBT student model, disregarding background features. ImPA further enriches LsKD by ensuring the alignment of lesion features within the teacher before distilling knowledge to the student. Our comprehensive evaluation shows that CoMoTo is superior to traditional pretraining and image-level KD, improving performance by 7% Mean Sensitivity under low-data setting. Our code is available at https://github.com/Muhammad-Al-Barbary/CoMoTo .
- Abstract(参考訳): 乳房造影法(DBT)は,より長い読影時間のトレードオフはあるものの,従来のマンモグラフィと比較すると,病変検出精度が良好である進行乳房画像法である。
ディープラーニングを用いたDBTからの病変検出の高速化は、データ可用性の制限と膨大なアノテーションコストによって妨げられる。
この問題の可能性のある解決策は、マンモグラフィーのようなより広く利用可能なモダリティによって提供された情報を活用して、DBT病変の検出を強化することである。
本稿では,DBTの病変検出を改善するための新しいフレームワークであるCoMoToを提案する。
本フレームワークは,DBTモデルのトレーニングを強化するために,不整合マンモグラフィデータを活用し,推論時のマンモグラフィの必要性を排除し,実用性を向上させる。
具体的には,LsKD (Lesion-specific Knowledge Distillation) とImPA (Intra-modal Point Alignment) の2つの新しい構成要素を提案する。
LsKDは,マンモグラフィーの教師モデルからDBTの学生モデルまで,背景の特徴を無視して病変の特徴を選択的に蒸留する。
さらにImPAは、生徒に知識を蒸留する前に、教師内の病変の特徴のアライメントを確保することでLsKDをさらに強化する。
総合評価の結果,CoMoToは従来の事前学習や画像レベルのKDよりも優れており,低データ環境下での平均感度が7%向上していることがわかった。
私たちのコードはhttps://github.com/Muhammad-Al-Barbary/CoMoToで利用可能です。
関連論文リスト
- Unveiling Incomplete Modality Brain Tumor Segmentation: Leveraging Masked Predicted Auto-Encoder and Divergence Learning [6.44069573245889]
脳腫瘍のセグメンテーションは、特にマルチモーダルMRI(Multi-modal magnetic resonance imaging)における重要な課題である。
本稿では,不完全なモダリティデータから頑健な特徴学習を可能にする,マスク付き予測事前学習方式を提案する。
微調整段階において、我々は知識蒸留技術を用いて、完全なモダリティデータと欠落したモダリティデータの間に特徴を整列させ、同時にモデルロバスト性を向上する。
論文 参考訳(メタデータ) (2024-06-12T20:35:16Z) - SIFT-DBT: Self-supervised Initialization and Fine-Tuning for Imbalanced Digital Breast Tomosynthesis Image Classification [3.665816629105171]
乳がん検診・診断において,Digital Breast Tomo synthesis (DBT) が広く用いられている。
画像の異常を識別するために,ビューレベルのコントラスト型自己監督初期化とファインチューニングを用いた新しい手法を提案する。
提案手法は92.69%の量的AUCを970のユニークな研究で評価する。
論文 参考訳(メタデータ) (2024-03-19T20:52:31Z) - LightBTSeg: A lightweight breast tumor segmentation model using
ultrasound images via dual-path joint knowledge distillation [1.9355072302703609]
乳がんの軽度分節化のための二重パス共同知識蒸留フレームワークLightBTSegを提案する。
我々は、ボトルネックアーキテクチャを活用して、オリジナルの注意U-Netを再構築する。
そして、良性・悪性のカテゴリーの事前知識を用いて、二重経路連成知識蒸留を併用した教師ネットワークを設計する。
論文 参考訳(メタデータ) (2023-11-18T14:25:40Z) - AMLP:Adaptive Masking Lesion Patches for Self-supervised Medical Image
Segmentation [67.97926983664676]
自己監督型マスク画像モデリングは自然画像に対して有望な結果を示した。
しかし,このような手法を医用画像に直接適用することは依然として困難である。
適応型マスキング病変パッチ(AMLP)の自己管理型医用画像分割フレームワークを提案する。
論文 参考訳(メタデータ) (2023-09-08T13:18:10Z) - Diffusion Models for Counterfactual Generation and Anomaly Detection in
Brain Images [59.85702949046042]
病気の画像の健全なバージョンを生成し,それを用いて画素単位の異常マップを得るための弱教師付き手法を提案する。
健常者を対象にした拡散モデルを用いて, サンプリングプロセスの各ステップで拡散拡散確率モデル (DDPM) と拡散拡散確率モデル (DDIM) を組み合わせる。
本手法が正常なサンプルに適用された場合,入力画像は大幅な修正を伴わずに再構成されることを確認した。
論文 参考訳(メタデータ) (2023-08-03T21:56:50Z) - Automatic diagnosis of knee osteoarthritis severity using Swin
transformer [55.01037422579516]
変形性膝関節症 (KOA) は膝関節の慢性的な痛みと硬直を引き起こす疾患である。
我々は,Swin Transformer を用いて KOA の重大度を予測する自動手法を提案する。
論文 参考訳(メタデータ) (2023-07-10T09:49:30Z) - Knowledge distillation with a class-aware loss for endoscopic disease
detection [1.1470070927586016]
本研究では, 深層学習を活用して, 病変検出の困難さの局所化を改善するためのフレームワークを開発する。
本モデルは,内視鏡的疾患検出課題とKvasir-SEGデータセットの両方において,平均平均精度(mAP)において高い性能を実現する。
論文 参考訳(メタデータ) (2022-07-19T19:56:12Z) - SSD-KD: A Self-supervised Diverse Knowledge Distillation Method for
Lightweight Skin Lesion Classification Using Dermoscopic Images [62.60956024215873]
皮膚がんは最も一般的な悪性腫瘍の1つであり、人口に影響を与え、世界中で経済的な重荷を負っている。
皮膚がん検出のほとんどの研究は、ポータブルデバイス上での計算資源の制限を考慮せずに、高い予測精度を追求している。
本研究は,皮膚疾患分類のための汎用的なKDフレームワークに多様な知識を統一する,SSD-KDと呼ばれる新しい手法を提案する。
論文 参考訳(メタデータ) (2022-03-22T06:54:29Z) - Categorical Relation-Preserving Contrastive Knowledge Distillation for
Medical Image Classification [75.27973258196934]
そこで本研究では,一般的な平均教師モデルであるCRCKD(Categorical Relation-Reserving Contrastive Knowledge Distillation)アルゴリズムを提案する。
この正規化により、学生モデルの特徴分布はクラス内類似度が高く、クラス間分散を示す。
CCDとCRPの貢献により、我々のCRCKDアルゴリズムはより包括的に関係知識を蒸留することができる。
論文 参考訳(メタデータ) (2021-07-07T13:56:38Z) - A Benchmark for Studying Diabetic Retinopathy: Segmentation, Grading,
and Transferability [76.64661091980531]
糖尿病患者は糖尿病網膜症(DR)を発症するリスクがある
コンピュータ支援型DR診断は、DRの早期検出と重度評価のための有望なツールである。
このデータセットは、ピクセルレベルのDR関連病変アノテーションを持つ1,842枚の画像と、6人の眼科医によって評価された画像レベルのラベルを持つ1,000枚の画像を有する。
論文 参考訳(メタデータ) (2020-08-22T07:48:04Z) - Adaptation of a deep learning malignancy model from full-field digital
mammography to digital breast tomosynthesis [3.8954120406920336]
デジタル乳房トモシンセシス (DBT) は, 感度と特異性を高めることにより, 従来のマンモグラフィーを改善する。
深層学習(DL)モデルは主に2次元フルフィールドデジタルマンモグラフィ(FFDM)やスキャンされたフィルム画像に基づいて開発されている。
論文 参考訳(メタデータ) (2020-01-23T05:44:11Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。