論文の概要: The Consequences of the Framing of Machine Learning Risk Prediction
Models: Evaluation of Sepsis in General Wards
- arxiv url: http://arxiv.org/abs/2101.10790v1
- Date: Tue, 26 Jan 2021 14:00:05 GMT
- ステータス: 処理完了
- システム内更新日: 2021-03-13 20:07:05.603050
- Title: The Consequences of the Framing of Machine Learning Risk Prediction
Models: Evaluation of Sepsis in General Wards
- Title(参考訳): 機械学習リスク予測モデルのフレーミングの継続:一般区における敗血症の評価
- Authors: Simon Meyer Lauritsen, Bo Thiesson, Marianne Johansson J{\o}rgensen,
Anders Hammerich Riis, Ulrick Skipper Espelund, Jesper Bo Weile and Jeppe
Lange
- Abstract要約: フレーミングがモデル性能とモデル学習に与える影響を4つの異なるアプローチで評価する。
デンマークの4自治体の221,283人の二次医療データを分析した。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Objectives: To evaluate the consequences of the framing of machine learning
risk prediction models. We evaluate how framing affects model performance and
model learning in four different approaches previously applied in published
artificial-intelligence (AI) models.
Setting and participants: We analysed structured secondary healthcare data
from 221,283 citizens from four Danish municipalities who were 18 years of age
or older.
Results: The four models had similar population level performance (a mean
area under the receiver operating characteristic curve of 0.73 to 0.82), in
contrast to the mean average precision, which varied greatly from 0.007 to
0.385. Correspondingly, the percentage of missing values also varied between
framing approaches. The on-clinical-demand framing, which involved samples for
each time the clinicians made an early warning score assessment, showed the
lowest percentage of missing values among the vital sign parameters, and this
model was also able to learn more temporal dependencies than the others. The
Shapley additive explanations demonstrated opposing interpretations of SpO2 in
the prediction of sepsis as a consequence of differentially framed models.
Conclusions: The profound consequences of framing mandate attention from
clinicians and AI developers, as the understanding and reporting of framing are
pivotal to the successful development and clinical implementation of future AI
technology. Model framing must reflect the expected clinical environment. The
importance of proper problem framing is by no means exclusive to sepsis
prediction and applies to most clinical risk prediction models.
- Abstract(参考訳): 目的:機械学習リスク予測モデルのフレーム化の結果を評価する。
フレーミングがモデル性能とモデル学習に与える影響を,これまでに公開された人工知能(AI)モデルに適用された4つの異なるアプローチで評価した。
設定と参加者:18歳以上のデンマークの4市町村から221,283人の二次医療データを分析した。
結果: 平均平均精度は0.007から0.385に大きく変化したのに対し, 4モデルは同じ人口レベルの性能(受信者の動作特性曲線下の平均面積は 0.73 から 0.82 に変化した。
それに応じて、欠落した値の比率もフレーミングアプローチによって異なる。
臨床医が早期の警告スコア評価を行う度にサンプルを投入したオンデマンドフレーミングでは、重要なサインパラメータの中で欠落した値の最低割合が示され、このモデルは他の指標よりも時間的依存関係を学習することができた。
Shapley加法的説明は、差分フレームモデルの結果、敗血症の予測におけるSpO2の反対解釈を示した。
結論: フレーミングの理解と報告が将来のAI技術の開発と臨床実装の成功に不可欠であるとして、臨床医やAI開発者からの注意を委ねるフレーミングの重大な結果。
モデルフレーミングは、期待される臨床環境を反映しなければならない。
適切な問題フレーミングの重要性は必ずしも敗血症予測に限らず、ほとんどの臨床リスク予測モデルに適用される。
関連論文リスト
- Deep State-Space Generative Model For Correlated Time-to-Event Predictions [54.3637600983898]
そこで本研究では,様々な種類の臨床イベント間の相互作用を捉えるために,潜伏状態空間生成モデルを提案する。
また,死亡率と臓器不全の関連性について有意な知見が得られた。
論文 参考訳(メタデータ) (2024-07-28T02:42:36Z) - Advanced Meta-Ensemble Machine Learning Models for Early and Accurate Sepsis Prediction to Improve Patient Outcomes [0.0]
本報告では, 全身性炎症性反応症候群, 早期警戒スコア, クイックシークエンシャル臓器不全評価など, 従来の敗血症スクリーニングツールの限界について検討する。
本稿では,機械学習技術 - ランダムフォレスト, エクストリームグラディエントブースティング, 決定木モデル - を用いて, セプシスの発症を予測することを提案する。
本研究は,これらのモデルについて,精度,精度,リコール,F1スコア,受信器動作特性曲線の下での領域といった重要な指標を用いて,個別かつ組み合わせたメタアンサンブルアプローチで評価する。
論文 参考訳(メタデータ) (2024-07-11T00:51:32Z) - Boosting the interpretability of clinical risk scores with intervention
predictions [59.22442473992704]
本稿では、今後の介入に関するモデルの仮定を明確に伝達する手段として、介入政策と有害事象リスクの合同モデルを提案する。
死亡確率などの典型的なリスクスコアと将来の介入確率スコアとを組み合わせることで、より解釈可能な臨床予測がもたらされることを示す。
論文 参考訳(メタデータ) (2022-07-06T19:49:42Z) - A New Approach for Interpretability and Reliability in Clinical Risk
Prediction: Acute Coronary Syndrome Scenario [0.33927193323747895]
我々は、リスクスコアと機械学習モデルの両方の最高の特徴を組み合わせた、新たなリスクアセスメント方法論を作成するつもりです。
提案手法は、標準LRと同一の試験結果を得たが、より優れた解釈性とパーソナライゼーションを提供する。
個人予測の信頼性推定は誤分類率と大きな相関を示した。
論文 参考訳(メタデータ) (2021-10-15T19:33:46Z) - Bootstrapping Your Own Positive Sample: Contrastive Learning With
Electronic Health Record Data [62.29031007761901]
本稿では,新しいコントラスト型正規化臨床分類モデルを提案する。
EHRデータに特化した2つのユニークなポジティブサンプリング戦略を紹介します。
私たちのフレームワークは、現実世界のCOVID-19 EHRデータの死亡リスクを予測するために、競争の激しい実験結果をもたらします。
論文 参考訳(メタデータ) (2021-04-07T06:02:04Z) - A scalable approach for developing clinical risk prediction applications
in different hospitals [2.3837093461599634]
機械学習アルゴリズムは現在、臨床応用のための急性事象の予測に広く使われている。
臨床リスク予測モデルの開発プロセスを複数の疾患に拡張するためのスケーラブルなソリューションを提供する。
論文 参考訳(メタデータ) (2021-01-21T21:22:32Z) - A Knowledge Distillation Ensemble Framework for Predicting Short and
Long-term Hospitalisation Outcomes from Electronic Health Records Data [5.844828229178025]
既存の結果予測モデルは、頻繁なポジティブな結果の低いリコールに悩まされる。
我々は、死亡率とICUの受け入れによって表される逆さを自動的に予測する、高度にスケーリング可能な、堅牢な機械学習フレームワークを提案する。
論文 参考訳(メタデータ) (2020-11-18T15:56:28Z) - UNITE: Uncertainty-based Health Risk Prediction Leveraging Multi-sourced
Data [81.00385374948125]
我々はUNcertaInTyベースのhEalth Risk Prediction(UNITE)モデルを提案する。
UNITEは、複数ソースの健康データを活用した正確な疾患リスク予測と不確実性推定を提供する。
非アルコール性脂肪肝疾患(NASH)とアルツハイマー病(AD)の実態予測タスクにおけるUNITEの評価を行った。
UNITEはAD検出のF1スコアで最大0.841点、NASH検出のPR-AUCで最大0.609点を達成し、最高のベースラインで最大19%の高パフォーマンスを達成している。
論文 参考訳(メタデータ) (2020-10-22T02:28:11Z) - Individualized Prediction of COVID-19 Adverse outcomes with MLHO [9.197411456718708]
我々は、反復的な特徴とアルゴリズムの選択を利用して健康状態を予測するエンドツーエンドの機械学習フレームワークを開発した。
入院前患者の健康状態と人口統計を表わす特徴として,約600点を用いた4つの有害な結果のモデル化を行った。
以上の結果から, 人口統計学的変数は, 新型コロナウイルス感染後の副作用の予測因子として重要であるが, 過去の臨床記録の組み入れは, 信頼性の高い予測モデルに欠かせないことが示唆された。
論文 参考訳(メタデータ) (2020-08-10T02:44:52Z) - A General Framework for Survival Analysis and Multi-State Modelling [70.31153478610229]
ニューラル常微分方程式を多状態生存モデル推定のためのフレキシブルで一般的な方法として用いる。
また,本モデルでは,サバイバルデータセット上での最先端性能を示すとともに,マルチステート環境での有効性を示す。
論文 参考訳(メタデータ) (2020-06-08T19:24:54Z) - Performance metrics for intervention-triggering prediction models do not
reflect an expected reduction in outcomes from using the model [71.9860741092209]
臨床研究者はしばしばリスク予測モデルの中から選択し評価する。
振り返りデータから算出される標準メトリクスは、特定の仮定の下でのみモデルユーティリティに関係します。
予測が時間を通して繰り返し配信される場合、標準メトリクスとユーティリティの関係はさらに複雑になる。
論文 参考訳(メタデータ) (2020-06-02T16:26:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。