論文の概要: Revitalizing Medical Time Series with Vision-Informed Retrieval: A Vision-Language Perspective
- arxiv url: http://arxiv.org/abs/2609.34652v1
- Date: Mon, 28 Sep 2026 08:58:34 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-03 11:34:09.896168
- Title: Revitalizing Medical Time Series with Vision-Informed Retrieval: A Vision-Language Perspective
- Title(参考訳): ヴィジュアルインフォームド検索による医療時系列の再生:ヴィジュアルランゲージの視点から
- Abstract要約: 我々は,凍結VLM由来の波形表現を形態認識クエリとして用いて,生の数値的MedTS特徴からの検索をガイドするViRe(ViRe)を提案する。
ViReは、確立された10のベースラインに対して強力な効果を示し、6つの公開ベンチマークで前の最先端技術に比べて、全体的な6.42%の相対的な改善をもたらす。
- 参考スコア(独自算出の注目度): 9.41404554176473
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Medical time series (MedTS) underpin many clinical classification tasks, yet existing methods usually represent them only as numerical sequences and underuse the morphology that is explicit in waveform inspection. To bridge this gap, we introduce Vision-Informed Retrieval (ViRe), which uses a frozen VLM-derived waveform representation as a morphology-aware Query to guide retrieval from raw numerical MedTS features. Specifically, a Vision Query is extracted using pre-trained vision-language models (VLMs) to obtain morphology-aware priors from waveform plots. A tailored attention-based cross-modal retrieval mechanism then uses the Vision Query to select morphology-relevant temporal and channel evidence from the numerical representation. ViRe demonstrates strong effectiveness against ten established baselines, yielding an overall 6.42% relative improvement over the previous state of the art across six public benchmarks. Code, training scripts, and reproducibility materials are publicly available in the GitHub Repository: https://github.com/Levi-Ackman/ViRe.
- Abstract(参考訳): 医療時系列(MedTS)は、多くの臨床分類タスクの基盤となっているが、既存の手法は通常、数値シーケンスとしてのみ表現し、波形検査で明示される形態を過小評価する。
このギャップを埋めるために,凍結VLM由来の波形表現を形態認識クエリとして使用し,生の数値的MedTS特徴からの検索をガイドするViRe(ViRe)を導入する。
具体的には、事前学習された視覚言語モデル(VLM)を用いてビジョンクエリを抽出し、波形プロットから形態素認識の先行情報を取得する。
注意に基づくクロスモーダル検索機構は、Vision Queryを使用して、数値表現から形態的関連時間的およびチャネル的エビデンスを選択する。
ViReは10の確立されたベースラインに対して強い効果を示し、6つの公開ベンチマークで前回の最先端よりも6.42%の相対的な改善を実現している。
コード、トレーニングスクリプト、再現性材料はGitHub Repositoryで公開されている。
関連論文リスト
- MedLVR: Latent Visual Reasoning for Reliable Medical Visual Question Answering [8.481971263315854]
textscMedLVRは、自動テキストデコーディングに明示的な視覚的エビデンス状態を導入する。
潜在的な視覚的推論は、診断に関連のある視覚的証拠を保存するための効果的なメカニズムを提供する。
論文 参考訳(メタデータ) (2026-04-10T16:03:03Z) - MedROV: Towards Real-Time Open-Vocabulary Detection Across Diverse Medical Imaging Modalities [89.81463562506637]
医用画像のための最初のリアルタイムオープン語彙検出モデルであるMedROVを紹介する。
対照的な学習とクロスモーダル表現を活用することで、MedROVは既知の構造と新しい構造の両方を効果的に検出する。
論文 参考訳(メタデータ) (2025-11-25T18:59:53Z) - TemMed-Bench: Evaluating Temporal Medical Image Reasoning in Vision-Language Models [54.48710348910535]
既存の医学推論ベンチマークは、主に1回の訪問からの画像に基づいて患者の状態を分析することに焦点を当てている。
臨床訪問における患者の状態の変化を分析するための最初のベンチマークであるTemMed-Benchを紹介する。
論文 参考訳(メタデータ) (2025-09-29T17:51:26Z) - Time Series Representations for Classification Lie Hidden in Pretrained Vision Transformers [49.07665715422702]
時系列を画像に変換するフレームワークであるTime Vision Transformer (TiViT) を提案する。
標準時系列分類ベンチマークにおいて, TiViT が最先端の性能を達成することを示す。
本研究は,非視覚領域における視覚表現の再利用に向けた新たな方向を明らかにするものである。
論文 参考訳(メタデータ) (2025-06-10T09:54:51Z) - Guiding Medical Vision-Language Models with Explicit Visual Prompts: Framework Design and Comprehensive Exploration of Prompt Variations [15.052986179046076]
医用エンティティ抽出,視覚的プロンプト生成,およびデータセット適応を統合した,視覚的プロンプトによる微調整のための先駆的フレームワークであるMedVPを紹介する。
我々は、複数の医療用VQAデータセットにおいて、最新の最先端の大規模モデルを上回る結果を得た。
論文 参考訳(メタデータ) (2025-01-04T21:23:36Z) - Unlocking the Power of Spatial and Temporal Information in Medical Multimodal Pre-training [99.2891802841936]
我々は,空間的・時間的微粒なモデリングのためのMed-STフレームワークを提案する。
空間モデリングでは、Med-STはMixture of View Expert (MoVE)アーキテクチャを使用して、正面と横の両方のビューから異なる視覚的特徴を統合する。
時間的モデリングのために,フォワードマッピング分類 (FMC) とリバースマッピング回帰 (RMR) による新たな双方向サイクル整合性目標を提案する。
論文 参考訳(メタデータ) (2024-05-30T03:15:09Z) - Medical Vision-Language Pre-Training for Brain Abnormalities [96.1408455065347]
本稿では,PubMedなどの公共リソースから,医用画像・テキスト・アライメントデータを自動的に収集する方法を示す。
特に,まず大きな脳画像テキストデータセットを収集することにより,事前学習プロセスの合理化を図るパイプラインを提案する。
また,医療領域におけるサブフィギュアをサブキャプションにマッピングするというユニークな課題についても検討した。
論文 参考訳(メタデータ) (2024-04-27T05:03:42Z) - RAMM: Retrieval-augmented Biomedical Visual Question Answering with
Multi-modal Pre-training [45.38823400370285]
ヴィジュアル・アンド・ランゲージ・マルチモーダル事前学習と微調整は視覚的質問応答(VQA)において大きな成功を収めた。
本稿では, バイオメディカルVQAのためのRAMMという, 事前学習とファイントゥン検索のパラダイムを提案する。
論文 参考訳(メタデータ) (2023-03-01T14:21:19Z) - Learning to Exploit Temporal Structure for Biomedical Vision-Language
Processing [53.89917396428747]
視覚言語処理における自己教師あり学習は、画像とテキストのモダリティのセマンティックアライメントを利用する。
トレーニングと微調整の両方で利用できる場合、事前のイメージとレポートを明示的に説明します。
我々のアプローチはBioViL-Tと呼ばれ、テキストモデルと共同で訓練されたCNN-Transformerハイブリッドマルチイメージエンコーダを使用する。
論文 参考訳(メタデータ) (2023-01-11T16:35:33Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。