論文の概要: Improving Medical Predictions by Irregular Multimodal Electronic Health
Records Modeling
- arxiv url: http://arxiv.org/abs/2210.12156v1
- Date: Tue, 18 Oct 2022 20:29:26 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-30 11:42:54.373401
- Title: Improving Medical Predictions by Irregular Multimodal Electronic Health
Records Modeling
- Title(参考訳): 不規則なマルチモーダル電子健康記録モデルによる医療予測の改善
- Authors: Xinlu Zhang, Shiyang Li, Zhiyu Chen, Xifeng Yan, Linda Petzold
- Abstract要約: 本稿では,医学的予測を改善するため,不規則性をマルチモーダル表現に統合する問題に対処する。
私たちの知る限りでは、これはマルチモダリティにおける不規則性を徹底的にモデル化する最初の試みである。
その結果,提案手法は単一モードおよび多モード融合シナリオのいずれにおいても,最先端(SOTA)手法よりも優れていた。
- 参考スコア(独自算出の注目度): 19.346610191591143
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Health conditions among patients in intensive care units (ICUs) are monitored
via electronic health records (EHRs), composed of numerical time series and
lengthy clinical note sequences, both taken at irregular time intervals.
Dealing with such irregularity in every modality, and integrating irregularity
into multimodal representations to improve medical predictions, is a
challenging problem. In this paper, we address this problem by (1) modeling
irregular time series by incorporating hand-crafted imputation embeddings into
learned interpolation embeddings via a gating mechanism; (2) casting a series
of clinical note representations as multivariate irregular time series and
tackling irregularity via a time attention mechanism; and (3) fusing
multimodalities with an interleaved attention mechanism across temporal steps
to integrate irregularity into multimodal representations. To the best of our
knowledge, this is the first work to thoroughly model irregularity in
multimodalities and to take into account temporal knowledge in multimodal
fusion, for improving medical predictions. The results on two medical
prediction tasks show that our proposed methods outperform the state-of-the-art
(SOTA) methods in both every single modality and multimodal fusion scenarios,
illustrating the effectiveness of our methods and the value of modeling
irregularity in multimodal fusion.
- Abstract(参考訳): 集中治療室(icus)の患者の健康状態は、不規則な時間間隔で、数値的な時系列と長い臨床記録からなる電子健康記録(ehrs)によって監視される。
あらゆるモダリティにおいてそのような不規則性に対処し、医療予測を改善するために多モーダル表現に不規則性を統合することは難しい問題である。
本稿では,(1)ゲーティング機構を介して学習補間埋め込みに手作りのインプット埋め込みを組み込んで不規則な時系列をモデル化すること,(2)多変量不規則な時系列として一連の臨床メモ表現をキャストすること,(3)時間的注意機構を介して不規則性を多モーダル表現に統合するための時間的ステップでインターリーブされた注意機構を融合させることにより,この問題に対処する。
我々の知る限りでは、マルチモーダルの不規則性を徹底的にモデル化し、マルチモーダル融合における時間的知識を考慮し、医療予測を改善するための最初の試みである。
2つの医療予測タスクの結果,提案手法は単一モードおよび多モード融合のシナリオにおいて最先端(sota)手法よりも優れており,マルチモーダル融合におけるモデリングの不規則性の有効性が示唆された。
関連論文リスト
- CTPD: Cross-Modal Temporal Pattern Discovery for Enhanced Multimodal Electronic Health Records Analysis [46.56667527672019]
マルチモーダルEHRデータから有意な時間的パターンを効率的に抽出するために,CTPD(Cross-Modal Temporal Pattern Discovery)フレームワークを導入する。
提案手法では,時間的セマンティックな埋め込みを生成するためにスロットアテンションを用いて改良された時間的パターン表現を提案する。
論文 参考訳(メタデータ) (2024-11-01T15:54:07Z) - PMT: Progressive Mean Teacher via Exploring Temporal Consistency for Semi-Supervised Medical Image Segmentation [51.509573838103854]
医用画像セグメンテーションのための半教師付き学習フレームワークであるプログレッシブ平均教師(PMT)を提案する。
我々のPMTは、トレーニングプロセスにおいて、堅牢で多様な特徴を学習することで、高忠実な擬似ラベルを生成する。
CT と MRI の異なる2つのデータセットに対する実験結果から,本手法が最先端の医用画像分割法より優れていることが示された。
論文 参考訳(メタデータ) (2024-09-08T15:02:25Z) - DualTime: A Dual-Adapter Multimodal Language Model for Time Series Representation [25.47662257105448]
時系列表現のためのデュアル適応型マルチモーダル言語モデルであるDualTimeを提案する。
本手法は,教師なし設定と教師なし設定の両方において,最先端モデルよりも優れる。
論文 参考訳(メタデータ) (2024-06-07T14:34:28Z) - Confidence-aware multi-modality learning for eye disease screening [58.861421804458395]
眼疾患スクリーニングのための新しい多モード顕在核融合パイプラインを提案する。
モダリティごとに信頼度を測り、マルチモダリティ情報をエレガントに統合する。
パブリックデータセットと内部データセットの両方の実験結果は、我々のモデルが堅牢性に優れていることを示している。
論文 参考訳(メタデータ) (2024-05-28T13:27:30Z) - Global Contrastive Training for Multimodal Electronic Health Records with Language Supervision [1.6245786035158123]
本稿では,医療時系列と臨床ノートに着目した,新しいマルチモーダルコントラスト学習フレームワークを提案する。
このフレームワークは、時間的クロスアテンション変換器と動的埋め込みおよびトークン化スキームを統合し、マルチモーダルな特徴表現を学習する。
実世界のERHデータセットを用いて実験したところ, 術後合併症9例の発症予測において, 我々のフレームワークは最先端のアプローチよりも優れていた。
論文 参考訳(メタデータ) (2024-04-10T04:19:59Z) - Temporal Cross-Attention for Dynamic Embedding and Tokenization of Multimodal Electronic Health Records [1.6609516435725236]
マルチモーダルな臨床時系列を正確に表現するための動的埋め込み・トークン化フレームワークを提案する。
術後合併症9例の発症予測に基礎的アプローチを応用した。
論文 参考訳(メタデータ) (2024-03-06T19:46:44Z) - TCFimt: Temporal Counterfactual Forecasting from Individual Multiple
Treatment Perspective [50.675845725806724]
個別多面的治療の観点からの時間的対実予測の包括的枠組み(TCFimt)を提案する。
TCFimtは、選択と時間変化バイアスを軽減するためにSeq2seqフレームワークの逆タスクを構築し、比較学習ベースのブロックを設計し、混合処理効果を分離した主治療効果と因果相互作用に分解する。
提案手法は, 特定の治療法による今後の結果予測と, 最先端手法よりも最適な治療タイプとタイミングを選択する上で, 良好な性能を示す。
論文 参考訳(メタデータ) (2022-12-17T15:01:05Z) - Density-Aware Personalized Training for Risk Prediction in Imbalanced
Medical Data [89.79617468457393]
不均衡率(クラス密度差)のトレーニングモデルは、最適以下の予測につながる可能性がある。
この不均衡問題に対するモデルトレーニングのためのフレームワークを提案する。
実世界の医療データセットにおけるモデルの性能向上を実証する。
論文 参考訳(メタデータ) (2022-07-23T00:39:53Z) - Multi-view Integration Learning for Irregularly-sampled Clinical Time
Series [1.9639092030562577]
不規則な時系列データからの多視点機能統合学習をインピーダンスフリーで自己保持機構で提案する。
我々は,観測値の関連性,指標の欠如,連続観測間の時間間隔を同時に学習する。
我々は,マルチビュー観察における相互関係の表現学習を促進するために,注意に基づくデコーダを欠落値インプタとして構築する。
論文 参考訳(メタデータ) (2021-01-25T10:02:50Z) - M2Net: Multi-modal Multi-channel Network for Overall Survival Time
Prediction of Brain Tumor Patients [151.4352001822956]
生存時間(OS)の早期かつ正確な予測は、脳腫瘍患者に対するより良い治療計画を得るのに役立つ。
既存の予測手法は、磁気共鳴(MR)ボリュームの局所的な病変領域における放射能特性に依存している。
我々は,マルチモーダルマルチチャネルネットワーク(M2Net)のエンドツーエンドOS時間予測モデルを提案する。
論文 参考訳(メタデータ) (2020-06-01T05:21:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。