論文の概要: Medical SAM Adapter: Adapting Segment Anything Model for Medical Image
Segmentation
- arxiv url: http://arxiv.org/abs/2304.12620v7
- Date: Fri, 29 Dec 2023 03:40:59 GMT
- ステータス: 処理完了
- システム内更新日: 2024-01-03 02:46:50.044980
- Title: Medical SAM Adapter: Adapting Segment Anything Model for Medical Image
Segmentation
- Title(参考訳): 医用samアダプタ : 医用画像分割のためのsegment anythingモデルの適用
- Authors: Junde Wu and Wei Ji and Yuanpei Liu and Huazhu Fu and Min Xu and Yanwu
Xu and Yueming Jin
- Abstract要約: Segment Anything Model (SAM)は画像セグメンテーションの分野で最近人気を集めている。
近年の研究では、SAMは医用画像のセグメンテーションにおいて過小評価されている。
ドメイン固有の医療知識をセグメンテーションモデルに組み込んだ医療SAMアダプタ(Med-SA)を提案する。
- 参考スコア(独自算出の注目度): 51.770805270588625
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The Segment Anything Model (SAM) has recently gained popularity in the field
of image segmentation due to its impressive capabilities in various
segmentation tasks and its prompt-based interface. However, recent studies and
individual experiments have shown that SAM underperforms in medical image
segmentation, since the lack of the medical specific knowledge. This raises the
question of how to enhance SAM's segmentation capability for medical images. In
this paper, instead of fine-tuning the SAM model, we propose the Medical SAM
Adapter (Med-SA), which incorporates domain-specific medical knowledge into the
segmentation model using a light yet effective adaptation technique. In Med-SA,
we propose Space-Depth Transpose (SD-Trans) to adapt 2D SAM to 3D medical
images and Hyper-Prompting Adapter (HyP-Adpt) to achieve prompt-conditioned
adaptation. We conduct comprehensive evaluation experiments on 17 medical image
segmentation tasks across various image modalities. Med-SA outperforms several
state-of-the-art (SOTA) medical image segmentation methods, while updating only
2\% of the parameters. Our code is released at
https://github.com/KidsWithTokens/Medical-SAM-Adapter.
- Abstract(参考訳): Segment Anything Model (SAM) は、画像セグメンテーションの分野で、様々なセグメンテーションタスクやプロンプトベースのインタフェースにおいて印象的な機能によって最近人気を集めている。
しかし、最近の研究や個人実験により、SAMは医学的な特定の知識が欠如しているため、医療画像のセグメンテーションにおいて不十分であることが示されている。
これにより、医療画像におけるSAMのセグメンテーション能力の強化に関する疑問が提起される。
本稿では,samモデルを微調整する代わりに,領域固有の医学知識を,軽量かつ効果的な適応手法を用いてセグメンテーションモデルに組み込む医療用samアダプタ(med-sa)を提案する。
Med-SAでは,3次元医用画像に2次元SAMを適応させる空間深度変換(SD-Trans)と,即時適応を実現するハイパープロンプト適応(HyP-Adpt)を提案する。
各種画像モダリティを対象とした17の医用画像分割作業に関する総合評価実験を行った。
Med-SAは、パラメータのわずか2%を更新しながら、いくつかの最先端(SOTA)医療画像セグメンテーション法より優れている。
私たちのコードはhttps://github.com/KidsWithTokens/Medical-SAM-Adapterでリリースされています。
関連論文リスト
- MA-SAM: Modality-agnostic SAM Adaptation for 3D Medical Image
Segmentation [58.53672866662472]
我々はMA-SAMと命名されたモダリティに依存しないSAM適応フレームワークを提案する。
本手法は,重量増加のごく一部だけを更新するためのパラメータ効率の高い微調整戦略に根ざしている。
画像エンコーダのトランスバータブロックに一連の3Dアダプタを注入することにより,事前学習した2Dバックボーンが入力データから3次元情報を抽出することができる。
論文 参考訳(メタデータ) (2023-09-16T02:41:53Z) - SAM-Med2D [34.82072231983896]
我々はSAM-Med2Dを医療用2次元画像に適用する最も包括的な研究である。
まず、公開およびプライベートデータセットから約4.6Mの画像と19.7Mマスクを収集し、キュレートします。
元のSAMのエンコーダとデコーダを微調整して、良好な性能のSAM-Med2Dを得る。
論文 参考訳(メタデータ) (2023-08-30T17:59:02Z) - AdaptiveSAM: Towards Efficient Tuning of SAM for Surgical Scene
Segmentation [49.59991322513561]
本稿では,新しいデータセットに迅速かつ効率的に適応できるSegment-Anything(SAM)の適応的な修正を提案する。
AdaptiveSAMは、フリーフォームテキストをプロンプトとして使用し、ラベル名のみをプロンプトとして、興味のあるオブジェクトをセグメント化することができる。
実験の結果,AdaptiveSAMは様々な医用画像データセットの最先端手法よりも優れていることがわかった。
論文 参考訳(メタデータ) (2023-08-07T17:12:54Z) - 3DSAM-adapter: Holistic Adaptation of SAM from 2D to 3D for Promptable
Medical Image Segmentation [56.50064853710202]
医用画像の領域分割を行うために, SAMを2次元から3次元に変換する新しい適応法を提案する。
本モデルでは, 腎腫瘍, 膵腫瘍, 大腸癌の3つのタスクのうち8.25%, 29.87%, 10.11%の3つのタスクにおいて, ドメイン・オブ・ザ・アーティヴ・メディカル・イメージ・セグメンテーション・モデルより優れ, 肝腫瘍セグメンテーションでも同様の性能が得られる。
論文 参考訳(メタデータ) (2023-06-23T12:09:52Z) - AutoSAM: Adapting SAM to Medical Images by Overloading the Prompt
Encoder [101.28268762305916]
この作業では、Segment Anything Modelを同じ入力イメージで動作するエンコーダに置き換える。
複数の医用画像とビデオのベンチマークで最先端の結果を得る。
内部の知識を検査し、軽量なセグメンテーションソリューションを提供するために、浅いデコンボリューションネットワークによってマスクに復号化することを学ぶ。
論文 参考訳(メタデータ) (2023-06-10T07:27:00Z) - Towards Segment Anything Model (SAM) for Medical Image Segmentation: A
Survey [8.76496233192512]
本稿では,セグメンテーションモデルの成功を医療画像のセグメンテーションタスクに拡張する取り組みについて論じる。
医用画像解析の基礎モデルを開発するために、将来の研究を導くために多くの洞察が導かれる。
論文 参考訳(メタデータ) (2023-05-05T16:48:45Z) - Customized Segment Anything Model for Medical Image Segmentation [10.933449793055313]
我々は,大規模画像分割モデルであるSAM(Segment Anything Model)に基づいて,医用画像分割のための大規模モデルをカスタマイズする新たな研究パラダイムを探求する。
SAMedは、SAMイメージエンコーダにローランクベース(LoRA)ファインタニング戦略を適用し、ラベル付き医用画像セグメンテーションデータセットにプロンプトエンコーダとマスクデコーダを併用する。
我々の訓練されたSAMedモデルは,最先端の手法に匹敵する医用画像のセマンティックセグメンテーションを実現する。
論文 参考訳(メタデータ) (2023-04-26T19:05:34Z) - Input Augmentation with SAM: Boosting Medical Image Segmentation with
Segmentation Foundation Model [36.015065439244495]
Segment Anything Model (SAM) はコンピュータビジョンタスクのための汎用セグメンテーションのための大規模モデルである。
SAMは100万枚の画像と10億枚以上のマスクを使って訓練され、自然の風景画像に広範囲のオブジェクトのセグメンテーション結果を生成することができる。
本報告では,SAMは医用画像データに高品質なセグメンテーションを提供していないが,その生成マスク,特徴,安定性スコアは,より優れた医用画像セグメンテーションモデルの構築と訓練に有用であることを示す。
論文 参考訳(メタデータ) (2023-04-22T07:11:53Z) - Segment Anything Model for Medical Image Analysis: an Experimental Study [19.95972201734614]
Segment Anything Model (SAM) は、ユーザ定義オブジェクトをインタラクティブな方法でセグメント化する基礎モデルである。
SAMの医用画像の分類能力について,各種のモダリティと解剖から,19の医用画像データセットの集合体を用いて評価した。
論文 参考訳(メタデータ) (2023-04-20T17:50:18Z) - MedSegDiff-V2: Diffusion based Medical Image Segmentation with
Transformer [53.575573940055335]
我々は、MedSegDiff-V2と呼ばれるトランスフォーマーベースの拡散フレームワークを提案する。
画像の異なる20種類の画像分割作業において,その有効性を検証する。
論文 参考訳(メタデータ) (2023-01-19T03:42:36Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。