論文の概要: Uncertainty estimations methods for a deep learning model to aid in
clinical decision-making -- a clinician's perspective
- arxiv url: http://arxiv.org/abs/2210.00589v1
- Date: Sun, 2 Oct 2022 17:54:54 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-04 16:28:24.269637
- Title: Uncertainty estimations methods for a deep learning model to aid in
clinical decision-making -- a clinician's perspective
- Title(参考訳): 臨床診断支援のための深層学習モデルの不確実性推定法-臨床医の視点から
- Authors: Michael Dohopolski (1), Kai Wang (1), Biling Wang (1), Ti Bai (1), Dan
Nguyen (1), David Sher (1), Steve Jiang (1), Jing Wang (1) ((1) Medical
Artificial Intelligence and Automation Laboratory and Department of Radiation
Oncology, UT Southwestern Medical Center, Dallas TX 75235, USA)
- Abstract要約: 深層学習にインスパイアされた不確実性推定技術はいくつかあるが、医療データセットに実装されているものはほとんどない。
我々は,不確かさを推定するために,ドロップアウト変動推論(DO),テスト時間拡張(TTA),共形予測,単一決定論的手法を比較した。
臨床実習にモデルを組み込む前に,複数の推定手法を評価することが重要である。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Prediction uncertainty estimation has clinical significance as it can
potentially quantify prediction reliability. Clinicians may trust 'blackbox'
models more if robust reliability information is available, which may lead to
more models being adopted into clinical practice. There are several deep
learning-inspired uncertainty estimation techniques, but few are implemented on
medical datasets -- fewer on single institutional datasets/models. We sought to
compare dropout variational inference (DO), test-time augmentation (TTA),
conformal predictions, and single deterministic methods for estimating
uncertainty using our model trained to predict feeding tube placement for 271
head and neck cancer patients treated with radiation. We compared the area
under the curve (AUC), sensitivity, specificity, positive predictive value
(PPV), and negative predictive value (NPV) trends for each method at various
cutoffs that sought to stratify patients into 'certain' and 'uncertain'
cohorts. These cutoffs were obtained by calculating the percentile
"uncertainty" within the validation cohort and applied to the testing cohort.
Broadly, the AUC, sensitivity, and NPV increased as the predictions were more
'certain' -- i.e., lower uncertainty estimates. However, when a majority vote
(implementing 2/3 criteria: DO, TTA, conformal predictions) or a stricter
approach (3/3 criteria) were used, AUC, sensitivity, and NPV improved without a
notable loss in specificity or PPV. Especially for smaller, single
institutional datasets, it may be important to evaluate multiple estimations
techniques before incorporating a model into clinical practice.
- Abstract(参考訳): 予測不確実性推定は、予測信頼性を定量化できる可能性があり、臨床的に重要である。
臨床医は、信頼できる情報が得られれば、より信頼性の高い「ブラックボックス」モデルを信頼することができる。
ディープラーニングに触発された不確実性推定技術はいくつか存在するが、医療データセットに実装されているものはほとんどない。
放射線治療を受けた271頭頸部癌患者の摂食チューブ配置予測を訓練したモデルを用いて,ドロップアウト変動推定(do),テスト時間加算(tta),コンフォメーション予測,不確かさ推定のための単一決定論的手法を比較した。
AUC, 感度, 特異性, 正の予測値 (PPV), 負の予測値 (NPV) の傾向を, 患者を「確実」なコホートと「不確実」なコホートに分類する様々なカットオフにおいて比較した。
これらのカットオフは、検証コホート内のパーセンタイル"不確かさ"を計算し、テストコホートに適用することで得られる。
AUC、感度、NPVは、予測がより「確実」であり、すなわち低い不確実性の推定値として増加した。
しかし, 多数決(DO, TTA, 適合予測)や厳格なアプローチ(3/3基準)が実施された場合, AUC, 感度, NPVは, 特異性やPVの顕著な損失を伴わずに改善した。
特に,小規模の単一施設データセットでは,モデルを臨床実践に取り入れる前に,複数の推定手法を評価することが重要である。
関連論文リスト
- SepsisLab: Early Sepsis Prediction with Uncertainty Quantification and Active Sensing [67.8991481023825]
セプシスは米国での院内死亡の主な原因である。
既存の予測モデルは通常、情報不足の少ない高品質なデータで訓練される。
限られた観察により信頼性の低い高リスク患者に対して,ロバストな能動センシングアルゴリズムを提案する。
論文 参考訳(メタデータ) (2024-07-24T04:47:36Z) - Uncertainty Quantification on Clinical Trial Outcome Prediction [37.238845949535616]
本稿では,不確実性の定量化を臨床治験結果の予測に取り入れることを提案する。
私たちの主な目標は、ニュアンスドの違いを識別するモデルの能力を強化することです。
我々は目的を達成するために選択的な分類手法を採用した。
論文 参考訳(メタデータ) (2024-01-07T13:48:05Z) - Towards Reliable Medical Image Segmentation by utilizing Evidential Calibrated Uncertainty [52.03490691733464]
本稿では,医療画像セグメンテーションネットワークにシームレスに統合可能な,実装が容易な基礎モデルであるDEviSを紹介する。
主観的論理理論を利用して、医用画像分割の問題に対する確率と不確実性を明示的にモデル化する。
DeviSには不確実性を考慮したフィルタリングモジュールが組み込まれている。
論文 参考訳(メタデータ) (2023-01-01T05:02:46Z) - Improving Trustworthiness of AI Disease Severity Rating in Medical
Imaging with Ordinal Conformal Prediction Sets [0.7734726150561088]
統計的に厳密な不確実性定量化の欠如は、AI結果の信頼を損なう重要な要因である。
分布自由不確実性定量化の最近の進歩は、これらの問題に対する実用的な解決策である。
本稿では, 正しい狭窄の重症度を含むことが保証される順序予測セットを形成する手法を実証する。
論文 参考訳(メタデータ) (2022-07-05T18:01:20Z) - Uncertainty-Informed Deep Learning Models Enable High-Confidence
Predictions for Digital Histopathology [40.96261204117952]
肺腺癌と扁平上皮癌を鑑別するモデルを訓練し,高い信頼度予測がUQなしで予測を上回ることを示す。
非肺癌コホートに対する腺癌と扁平上皮癌との高信頼度予測を精度良く行うことで, 領域シフトの設定においてUQ閾値の信頼性が保たれることを示す。
論文 参考訳(メタデータ) (2022-04-09T17:35:37Z) - Can uncertainty boost the reliability of AI-based diagnostic methods in
digital pathology? [3.8424737607413157]
デジタル病理学におけるDL予測の不確実性予測を付加すると,臨床応用の価値が増大する可能性が示唆された。
モデル統合手法(MCドロップアウトとディープアンサンブル)の有効性をモデル非依存アプローチと比較した。
以上の結果から,不確実性推定はある程度の信頼性を高め,分類しきい値選択に対する感度を低下させる可能性が示唆された。
論文 参考訳(メタデータ) (2021-12-17T10:10:00Z) - DEUP: Direct Epistemic Uncertainty Prediction [56.087230230128185]
認識の不確実性は、学習者の知識の欠如によるサンプル外の予測エラーの一部である。
一般化誤差の予測を学習し, aleatoric uncertaintyの推定を減算することで, 認識的不確かさを直接推定する原理的アプローチを提案する。
論文 参考訳(メタデータ) (2021-02-16T23:50:35Z) - Clinical Outcome Prediction from Admission Notes using Self-Supervised
Knowledge Integration [55.88616573143478]
臨床テキストからのアウトカム予測は、医師が潜在的なリスクを見落としないようにする。
退院時の診断,手術手順,院内死亡率,長期予測は4つの一般的な結果予測対象である。
複数の公開資料から得られた患者結果に関する知識を統合するために,臨床結果の事前学習を提案する。
論文 参考訳(メタデータ) (2021-02-08T10:26:44Z) - Increasing the efficiency of randomized trial estimates via linear
adjustment for a prognostic score [59.75318183140857]
ランダム化実験による因果効果の推定は臨床研究の中心である。
歴史的借用法のほとんどは、厳格なタイプiエラー率制御を犠牲にして分散の削減を達成する。
論文 参考訳(メタデータ) (2020-12-17T21:10:10Z) - UNITE: Uncertainty-based Health Risk Prediction Leveraging Multi-sourced
Data [81.00385374948125]
我々はUNcertaInTyベースのhEalth Risk Prediction(UNITE)モデルを提案する。
UNITEは、複数ソースの健康データを活用した正確な疾患リスク予測と不確実性推定を提供する。
非アルコール性脂肪肝疾患(NASH)とアルツハイマー病(AD)の実態予測タスクにおけるUNITEの評価を行った。
UNITEはAD検出のF1スコアで最大0.841点、NASH検出のPR-AUCで最大0.609点を達成し、最高のベースラインで最大19%の高パフォーマンスを達成している。
論文 参考訳(メタデータ) (2020-10-22T02:28:11Z) - Uncertainty estimation for classification and risk prediction on medical
tabular data [0.0]
本研究は,医療データの分類とリスク予測のための不確実性推定の理解を深めるものである。
医療などのデータ共有分野において、モデルの予測の不確実性を測定する能力は、意思決定支援ツールの改善につながる可能性がある。
論文 参考訳(メタデータ) (2020-04-13T08:46:41Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。