論文の概要: Segmentation-Assisted Brain MRI Synthesis with Cross-Image Multi-Contrast Feature Memory Bank Retrieval Augmentation
- arxiv url: http://arxiv.org/abs/2606.08421v1
- Date: Sun, 07 Jun 2026 02:41:24 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-09 14:42:06.099072
- Title: Segmentation-Assisted Brain MRI Synthesis with Cross-Image Multi-Contrast Feature Memory Bank Retrieval Augmentation
- Title(参考訳): 画像横断的マルチコントラスト特徴量記憶バンク検索による部分的脳MRI合成
- Authors: Wenwei Huang, Jia Wei, Jianlong Zhou,
- Abstract要約: 本稿では,合成中心のセグメンテーション支援型クローズループフレームワークを提案する。
提案手法は, 医療用脳画像合成タスクの処理に有効であり, 従来の方法と比較して優れた性能を示す。
- 参考スコア(独自算出の注目度): 7.213968557982194
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Multi-contrast brain MRI provide complementary soft-tissue characteristics that aid in the screening and diagnosis of diseases. However, limited scanning time, image corruption and various imaging protocols often result in incomplete multi-contrast images. While current approaches excel in image synthesis, they often struggle to synthesize critical tumor regions and exploit contextual information in multi-contrast brain MRI effectively. To address this issue, we propose a synthesis-centric, segmentation-assisted closed-loop framework with retrieval augmentation synthesis. Our method overall takes a generative adversarial architecture, which aims to synthesize missing contrasts from any combination of available ones with a single model. To explicitly capture tumor semantics and focus synthesis on tumor regions, we add an auxiliary segmentation branch that predicts tumor masks and feeds them back as semantic conditioning in synthesis branch, thereby learning tumor-aware representations in the model and improving synthesis fidelity. Furthermore, we propose a dual-bank retrieval augmentation strategy. It dynamically queries two external knowledge bases, namely a tumor masks memory bank for crucial tumor context and cross-image contrast feature memory bank for global style information, to augment synthesis. Verified on two public multi-contrast magnetic resonance brain datasets: BraTs2020 and UCSF-BMSR, the proposed method is effective in handling medical brain images synthesis tasks and shows superior performance compared to previous methods. Code is available at:https://github.com/iBizzard/SSCF.git
- Abstract(参考訳): マルチコントラスト脳MRIは、疾患のスクリーニングと診断に役立つ相補的なソフトタスク特性を提供する。
しかし、スキャン時間、画像の破損、様々な画像プロトコルは、しばしば不完全なマルチコントラスト画像をもたらす。
現在のアプローチは画像合成に優れているが、重要な腫瘍領域を合成し、マルチコントラスト脳MRIの文脈情報を効果的に活用するのに苦労することが多い。
そこで本研究では,合成中心のセグメンテーション支援型クローズドループフレームワークを提案する。
提案手法は, 利用可能なコントラストを1つのモデルで組み合わせることで, コントラストの欠如を解消する。
腫瘍のセマンティクスを明示的に把握し,腫瘍領域に焦点を合わせるために補助セグメンテーションブランチを追加し,腫瘍マスクを予測し,それらを合成ブランチのセマンティクス条件としてフィードバックすることで,モデル内の腫瘍認識表現を学習し,合成精度を向上させる。
さらに,デュアルバンク検索強化戦略を提案する。
それは、2つの外部知識ベース、すなわち重要な腫瘍コンテキストのための腫瘍マスクメモリバンクと、グローバルスタイル情報のためのクロスイメージコントラスト特徴メモリバンクを動的にクエリして、合成を強化する。
2つのパブリックなマルチコントラスト磁気共鳴脳データセット(BraTs2020とUCSF-BMSR)で検証され、提案手法は医療用脳画像合成タスクの処理に有効であり、従来の方法と比較して優れた性能を示す。
コードは、https://github.com/iBizzard/SSCF.gitで入手できる。
関連論文リスト
- Brain-WM: Brain Glioblastoma World Model [56.45393372490125]
我々は、次世代治療予測と将来のMRI生成を統一する先駆的なGBMワールドモデルであるBrain-WMを提案する。
Brain-WMは、潜在ダイナミクスを共有潜在空間に符号化し、関節自己回帰治療予測とフローベース将来のMRI生成を行う。
最終的にBrain-WMは、患者医療を最適化するための堅牢な臨床サンドボックスを提供する。
論文 参考訳(メタデータ) (2026-03-08T09:54:08Z) - MindFormer: Semantic Alignment of Multi-Subject fMRI for Brain Decoding [50.55024115943266]
本稿では,MindFormer を用いたマルチオブジェクト fMRI 信号のセマンティックアライメント手法を提案する。
このモデルは、fMRIから画像生成のための安定拡散モデルや、fMRIからテキスト生成のための大規模言語モデル(LLM)の条件付けに使用できるfMRI条件付き特徴ベクトルを生成するように設計されている。
実験の結果,MindFormerは意味的に一貫した画像とテキストを異なる主題にわたって生成することがわかった。
論文 参考訳(メタデータ) (2024-05-28T00:36:25Z) - The Brain Tumor Segmentation (BraTS) Challenge 2023: Brain MR Image Synthesis for Tumor Segmentation (BraSyn) [9.082208613256295]
本稿では,脳MR画像合成ベンチマーク(BraSyn)とMICCAI(Medical Image Computing and Computer-Assisted Intervention)2023を併用して,脳MR画像合成ベンチマーク(BraSyn)の確立について紹介する。
この課題の主な目的は、複数の利用可能な画像が提供される際に、MRIの欠落を現実的に生成できる画像合成手法を評価することである。
論文 参考訳(メタデータ) (2023-05-15T20:49:58Z) - Joint fMRI Decoding and Encoding with Latent Embedding Alignment [77.66508125297754]
我々はfMRIデコーディングと符号化の両方に対処する統合フレームワークを導入する。
本モデルでは、fMRI信号から視覚刺激を同時に回復し、統合された枠組み内の画像から脳活動を予測する。
論文 参考訳(メタデータ) (2023-03-26T14:14:58Z) - BrainCLIP: Bridging Brain and Visual-Linguistic Representation Via CLIP
for Generic Natural Visual Stimulus Decoding [51.911473457195555]
BrainCLIPはタスクに依存しないfMRIベースの脳復号モデルである。
脳の活動、画像、およびテキストの間のモダリティギャップを埋める。
BrainCLIPは、高い意味的忠実度で視覚刺激を再構築することができる。
論文 参考訳(メタデータ) (2023-02-25T03:28:54Z) - Cross-Modality Neuroimage Synthesis: A Survey [71.27193056354741]
マルチモダリティイメージングは、疾患の診断を改善し、解剖学的特性を持つ組織における相違を明らかにする。
完全な整列とペアの多モードニューロイメージングデータの存在は、脳研究においてその効果を証明している。
もう一つの解決策は、教師なしまたは弱教師なしの学習方法を探究し、欠落した神経画像データを合成することである。
論文 参考訳(メタデータ) (2022-02-14T19:29:08Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。