論文の概要: Devil is in the Queries: Advancing Mask Transformers for Real-world
Medical Image Segmentation and Out-of-Distribution Localization
- arxiv url: http://arxiv.org/abs/2304.00212v1
- Date: Sat, 1 Apr 2023 03:24:03 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-04 19:11:25.444962
- Title: Devil is in the Queries: Advancing Mask Transformers for Real-world
Medical Image Segmentation and Out-of-Distribution Localization
- Title(参考訳): Devil is in the Queries: Advancing Mask Transformer for Real-world Medical Image Segmentation and Out-of-Distribution Localization
- Authors: Mingze Yuan, Yingda Xia, Hexin Dong, Zifan Chen, Jiawen Yao, Mingyan
Qiu, Ke Yan, Xiaoli Yin, Yu Shi, Xin Chen, Zaiyi Liu, Bin Dong, Jingren Zhou,
Le Lu, Ling Zhang, Li Zhang
- Abstract要約: 信頼できる医療AIアルゴリズムは、臨床的に危険な損傷を避けるために、尾の条件でその効果を示すべきである。
我々は、意味的セグメンテーションをソフトクラスタ割り当てとして定式化するために、Mask Transformerにおけるオブジェクトクエリの概念を採用する。
本フレームワークは膵腫瘍と肝腫瘍の分節という2つの実世界の分節タスクでテストされる。
- 参考スコア(独自算出の注目度): 40.013449382899566
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Real-world medical image segmentation has tremendous long-tailed complexity
of objects, among which tail conditions correlate with relatively rare diseases
and are clinically significant. A trustworthy medical AI algorithm should
demonstrate its effectiveness on tail conditions to avoid clinically dangerous
damage in these out-of-distribution (OOD) cases. In this paper, we adopt the
concept of object queries in Mask Transformers to formulate semantic
segmentation as a soft cluster assignment. The queries fit the feature-level
cluster centers of inliers during training. Therefore, when performing
inference on a medical image in real-world scenarios, the similarity between
pixels and the queries detects and localizes OOD regions. We term this OOD
localization as MaxQuery. Furthermore, the foregrounds of real-world medical
images, whether OOD objects or inliers, are lesions. The difference between
them is less than that between the foreground and background, possibly
misleading the object queries to focus redundantly on the background. Thus, we
propose a query-distribution (QD) loss to enforce clear boundaries between
segmentation targets and other regions at the query level, improving the inlier
segmentation and OOD indication. Our proposed framework is tested on two
real-world segmentation tasks, i.e., segmentation of pancreatic and liver
tumors, outperforming previous state-of-the-art algorithms by an average of
7.39% on AUROC, 14.69% on AUPR, and 13.79% on FPR95 for OOD localization. On
the other hand, our framework improves the performance of inlier segmentation
by an average of 5.27% DSC when compared with the leading baseline nnUNet.
- Abstract(参考訳): 現実世界の医療画像のセグメンテーションは、比較的稀な疾患と相関し、臨床的に重要な、非常に長い尾の複雑な物体を持つ。
信頼できる医療AIアルゴリズムは、これらのアウト・オブ・ディストリビューション(OOD)症例の臨床的に危険な損傷を避けるために、尾の条件でその効果を示すべきである。
本稿では,マスクトランスフォーマーにおけるオブジェクトクエリの概念を採用し,意味セグメンテーションをソフトクラスタ割り当てとして定式化する。
クエリは、トレーニング中のイリヤの機能レベルクラスタセンターに適合する。
したがって、現実のシナリオで医用画像上で推論を行う場合、画素とクエリの類似性がood領域を検出してローカライズする。
私たちはこのOODローカライゼーションをMaxQueryと呼びます。
さらに、OODオブジェクトや不整形物など、現実世界の医療画像の前景は、病変である。
それらの違いは前景と背景の違いよりも小さく、オブジェクトクエリが背景に冗長にフォーカスするように誤解を招く可能性がある。
そこで本研究では,クエリレベルのセグメント化目標と他の領域との明確な境界を強制するクエリ分散(qd)損失を提案する。
提案手法は, 膵腫瘍と肝腫瘍の分節化, AUROCでは平均7.39%, AUPRでは14.69%, OODでは13.79%と, 2つの実世界の分節化作業で検証された。
一方,本フレームワークは,主要なベースラインであるnnUNetと比較して,平均5.27%のDSCで不整合セグメンテーション性能を向上する。
関連論文リスト
- OOD-SEG: Out-Of-Distribution detection for image SEGmentation with sparse multi-class positive-only annotations [4.9547168429120205]
医療・外科画像におけるディープニューラルネットワークはいくつかの課題に直面しており、そのうちの2つはこの問題に対処することを目指している。
まず、医用画像のための完全なピクセルレベルのセグメンテーションラベルを取得するのに時間がかかり、ドメインの専門知識を必要とする。
第二に、典型的なセグメンテーションパイプラインは、配布外ピクセルを検出できず、デプロイ中に急激なアウトプットが発生する傾向がある。
論文 参考訳(メタデータ) (2024-11-14T16:06:30Z) - Self-Supervised Correction Learning for Semi-Supervised Biomedical Image
Segmentation [84.58210297703714]
半教師付きバイオメディカルイメージセグメンテーションのための自己教師付き補正学習パラダイムを提案する。
共有エンコーダと2つの独立デコーダを含むデュアルタスクネットワークを設計する。
異なるタスクのための3つの医用画像分割データセットの実験により,本手法の優れた性能が示された。
論文 参考訳(メタデータ) (2023-01-12T08:19:46Z) - Reliable Joint Segmentation of Retinal Edema Lesions in OCT Images [55.83984261827332]
本稿では,信頼性の高いマルチスケールウェーブレットエンハンストランスネットワークを提案する。
本研究では,ウェーブレット型特徴抽出器ネットワークとマルチスケール変圧器モジュールを統合したセグメンテーションバックボーンを開発した。
提案手法は,他の最先端セグメンテーション手法と比較して信頼性の高いセグメンテーション精度を実現する。
論文 参考訳(メタデータ) (2022-12-01T07:32:56Z) - Generative Adversarial Networks for Weakly Supervised Generation and Evaluation of Brain Tumor Segmentations on MR Images [0.0]
本研究は2次元磁気共鳴画像におけるセグメント異常に対する弱教師付きアプローチを示す。
我々は,癌画像を健全な変種に変換するGAN(Generative Adversarial Network)を訓練する。
非共役な変種は、弱監督的な方法で分割を評価するためにも用いられる。
論文 参考訳(メタデータ) (2022-11-10T00:04:46Z) - Cross-level Contrastive Learning and Consistency Constraint for
Semi-supervised Medical Image Segmentation [46.678279106837294]
半教師型医用画像セグメンテーションにおける局所特徴の表現能力を高めるためのクロスレベルコンストラシティブ学習手法を提案する。
クロスレベルなコントラスト学習と一貫性制約の助けを借りて、非ラベル付きデータを効果的に探索してセグメンテーション性能を向上させることができる。
論文 参考訳(メタデータ) (2022-02-08T15:12:11Z) - Detect-and-Segment: a Deep Learning Approach to Automate Wound Image
Segmentation [8.354517822940783]
創傷分割マップを高一般化能力で作成するための深層学習手法を提案する。
提案手法では, 深部神経回路が創位置を検出し, 非形態的背景から創を分離し, 創節分割マップを算出した。
論文 参考訳(メタデータ) (2021-11-02T13:39:13Z) - Triggering Failures: Out-Of-Distribution detection by learning from
local adversarial attacks in Semantic Segmentation [76.2621758731288]
セグメンテーションにおけるアウト・オブ・ディストリビューション(OOD)オブジェクトの検出に取り組む。
私たちの主な貢献は、ObsNetと呼ばれる新しいOOD検出アーキテクチャであり、ローカル・アタック(LAA)に基づく専用トレーニングスキームと関連付けられています。
3つの異なるデータセットの文献の最近の10つの手法と比較して,速度と精度の両面で最高の性能が得られることを示す。
論文 参考訳(メタデータ) (2021-08-03T17:09:56Z) - Collaborative Boundary-aware Context Encoding Networks for Error Map
Prediction [65.44752447868626]
本稿では,AEP-Net と呼ばれる協調的コンテキスト符号化ネットワークを提案する。
具体的には、画像とマスクのより優れた特徴融合のための協調的な特徴変換分岐と、エラー領域の正確な局所化を提案する。
AEP-Netはエラー予測タスクの平均DSCが0.8358,0.8164であり、ピアソン相関係数が0.9873である。
論文 参考訳(メタデータ) (2020-06-25T12:42:01Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。