論文の概要: Predicting ICU In-Hospital Mortality Using Adaptive Transformer Layer Fusion
- arxiv url: http://arxiv.org/abs/2506.04924v2
- Date: Fri, 06 Jun 2025 05:55:30 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-06-09 17:28:43.080504
- Title: Predicting ICU In-Hospital Mortality Using Adaptive Transformer Layer Fusion
- Title(参考訳): Adaptive Transformer Layer Fusion を用いた心房内ICU死亡予測
- Authors: Han Wang, Ruoyun He, Guoguang Lao, Ting Liu, Hejiao Luo, Changqi Qin, Hongying Luo, Junmin Huang, Zihan Wei, Lu Chen, Yongzhi Xu, Ziqian Bi, Junhao Song, Tianyang Wang, Chia Xin Liang, Xinyuan Song, Huafeng Liu, Junfeng Hao, Chunjie Tian,
- Abstract要約: 本稿では,LoRAアダプタと適応層重み付け機構を併用して,BERTバックボーンから意味的特徴を融合するモジュール型アテンションベースアーキテクチャであるALFIAを紹介する。
ALFIAは、厳格なcw-24(CriticalWindow-24)ベンチマークに基づいて、AUPRCの最先端の分類器を上回り、バランスの取れた精度-リコールプロファイルを保存する。
本実験では,ALFIAの早期期成績が良好であることを確認するとともに,日常的な臨床テキストを直接操作することで,リスク階層化や緊急ケア設定への時間的介入に便利な,堅牢なツールを臨床医に提供した。
- 参考スコア(独自算出の注目度): 12.981138890399242
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: Early identification of high-risk ICU patients is crucial for directing limited medical resources. We introduce ALFIA (Adaptive Layer Fusion with Intelligent Attention), a modular, attention-based architecture that jointly trains LoRA (Low-Rank Adaptation) adapters and an adaptive layer-weighting mechanism to fuse multi-layer semantic features from a BERT backbone. Trained on our rigorous cw-24 (CriticalWindow-24) benchmark, ALFIA surpasses state-of-the-art tabular classifiers in AUPRC while preserving a balanced precision-recall profile. The embeddings produced by ALFIA's fusion module, capturing both fine-grained clinical cues and high-level concepts, enable seamless pairing with GBDTs (CatBoost/LightGBM) as ALFIA-boost, and deep neuro networks as ALFIA-nn, yielding additional performance gains. Our experiments confirm ALFIA's superior early-warning performance, by operating directly on routine clinical text, it furnishes clinicians with a convenient yet robust tool for risk stratification and timely intervention in critical-care settings.
- Abstract(参考訳): 高リスクICU患者の早期診断は、限られた医療資源の誘導に不可欠である。
ALFIA (Adaptive Layer Fusion with Intelligent Attention), LoRA (Low-Rank Adaptation) アダプタを併用したモジュール型アテンションベースアーキテクチャと,BERTバックボーンから多層セマンティック機能を融合する適応層重み付け機構を導入する。
厳格なcw-24(CriticalWindow-24)ベンチマークでトレーニングしたALFIAは、バランスの取れた精度-リコールプロファイルを維持しながら、AUPRCの最先端の表型分類器を超越する。
ALFIAの融合モジュールによって生成された埋め込みは、きめ細かい臨床的キューと高レベルの概念の両方をキャプチャし、ALFIA-boostとしてGBDT(CatBoost/LightGBM)とシームレスにペアリングし、ALFIA-nnとして深層神経ネットワークを組み込むことで、さらなるパフォーマンス向上をもたらす。
本実験では,ALFIAの早期期成績が良好であることを確認するとともに,日常的な臨床テキストを直接操作することで,リスク階層化や緊急ケア設定への時間的介入に便利な,堅牢なツールを臨床医に提供した。
関連論文リスト
- Channel-Imposed Fusion: A Simple yet Effective Method for Medical Time Series Classification [11.520819583343128]
本研究は、構造的透明性を重視したモデリングパラダイムに焦点を移し、医療データの本質的な特徴とより密接に一致させる。
本稿では,チャネル間情報融合による信号と雑音の比を高める新しい手法であるChannel Imposed Fusion (CIF)を提案する。
複数のパブリックなEEGおよびECGデータセットの実験結果は、提案手法が既存の最先端(SOTA)アプローチを様々な分類基準で上回るだけでなく、分類プロセスの透明性を著しく向上させ、医療時系列分類の新しい視点を提供することを示した。
論文 参考訳(メタデータ) (2025-05-31T01:44:30Z) - DeepBoost-AF: A Novel Unsupervised Feature Learning and Gradient Boosting Fusion for Robust Atrial Fibrillation Detection in Raw ECG Signals [1.794794261751548]
心房細動(英: atrial fibrillation, AF)は、健康リスクの上昇に伴う心臓不整脈である。
本研究では、教師なし深層学習と勾配促進モデルを統合してAF検出を改善する革新的なハイブリッド手法を提案する。
論文 参考訳(メタデータ) (2025-05-30T00:08:56Z) - Byzantine-Resilient Over-the-Air Federated Learning under Zero-Trust Architecture [68.83934802584899]
我々は,セキュアな適応クラスタリング(FedSAC)を用いたフェデレーション学習(Federated Learning)と呼ばれる,無線通信のための新しいビザンチン・ロバストFLパラダイムを提案する。
FedSACは、デバイスの一部をゼロ信頼アーキテクチャ(ZTA)ベースのビザンティン識別と適応デバイスクラスタリングによる攻撃から保護することを目的としている。
実験精度と収束率の両面から,提案手法よりもFedSACの方が優れていることを示す。
論文 参考訳(メタデータ) (2025-03-24T01:56:30Z) - Efficient Lung Ultrasound Severity Scoring Using Dedicated Feature Extractor [12.280417624228544]
MeDiVLADは多レベル肺超音波検査のための新しいパイプラインである。
我々は、自己知識蒸留を利用して、ラベルや集合フレームレベルの特徴を伴わずに視覚変換器(ViT)を事前訓練する。
最小限の微調整により、MeDiVLADはフレームレベルおよびビデオレベルのスコアリングにおいて従来の完全教師付き手法よりも優れることを示す。
論文 参考訳(メタデータ) (2025-01-21T22:28:22Z) - ASPS: Augmented Segment Anything Model for Polyp Segmentation [77.25557224490075]
SAM(Segment Anything Model)は、ポリープセグメンテーションに先例のないポテンシャルを導入している。
SAMのTransformerベースの構造は、グローバルおよび低周波情報を優先する。
CFAはトレーニング可能なCNNエンコーダブランチと凍結したViTエンコーダを統合し、ドメイン固有の知識の統合を可能にする。
論文 参考訳(メタデータ) (2024-06-30T14:55:32Z) - MSAGPT: Neural Prompting Protein Structure Prediction via MSA Generative Pre-Training [48.398329286769304]
マルチシークエンスアライメント(MSA)は、タンパク質ファミリーの進化的軌道を明らかにする上で重要な役割を担っている。
MSAGPTは、低MSA状態下でのMSA生成前訓練を通じてタンパク質構造予測を促進する新しいアプローチである。
論文 参考訳(メタデータ) (2024-06-08T04:23:57Z) - Pretraining is All You Need: A Multi-Atlas Enhanced Transformer
Framework for Autism Spectrum Disorder Classification [7.790241122137617]
本稿では,新しいマルチアトラス拡張トランスフォーマフレームワークMETAFormerを提案する。
ABIDE Iデータセットからの静止状態機能型磁気共鳴画像データを利用する。
平均精度は83.7%、AUCスコアは0.832である。
論文 参考訳(メタデータ) (2023-07-04T15:00:06Z) - Auto-FedRL: Federated Hyperparameter Optimization for
Multi-institutional Medical Image Segmentation [48.821062916381685]
Federated Learning(FL)は、明示的なデータ共有を避けながら協調的なモデルトレーニングを可能にする分散機械学習技術である。
本稿では,Auto-FedRLと呼ばれる,効率的な強化学習(RL)に基づくフェデレーションハイパーパラメータ最適化アルゴリズムを提案する。
提案手法の有効性は,CIFAR-10データセットと2つの実世界の医用画像セグメンテーションデータセットの不均一なデータ分割に対して検証される。
論文 参考訳(メタデータ) (2022-03-12T04:11:42Z) - Stochastic Optimization of Areas Under Precision-Recall Curves with
Provable Convergence [66.83161885378192]
ROC(AUROC)と精度リコール曲線(AUPRC)の下の領域は、不均衡問題に対する分類性能を評価するための一般的な指標である。
本稿では,深層学習のためのAUPRCの最適化手法を提案する。
論文 参考訳(メタデータ) (2021-04-18T06:22:21Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。