論文の概要: Development and Testing of a Novel Large Language Model-Based Clinical
Decision Support Systems for Medication Safety in 12 Clinical Specialties
- arxiv url: http://arxiv.org/abs/2402.01741v1
- Date: Mon, 29 Jan 2024 16:03:29 GMT
- ステータス: 処理完了
- システム内更新日: 2024-02-11 16:02:07.800854
- Title: Development and Testing of a Novel Large Language Model-Based Clinical
Decision Support Systems for Medication Safety in 12 Clinical Specialties
- Title(参考訳): 新規大規模言語モデルに基づく医薬品安全のための臨床判断支援システムの開発と試験
- Authors: Jasmine Chiat Ling Ong, Liyuan Jin, Kabilan Elangovan, Gilbert Yong
San Lim, Daniel Yan Zheng Lim, Gerald Gui Ren Sng, Yuhe Ke, Joshua Yi Min
Tung, Ryan Jian Zhong, Christopher Ming Yao Koh, Keane Zhi Hao Lee, Xiang
Chen, Jack Kian Chng, Aung Than, Ken Junyang Goh, Daniel Shu Wei Ting
- Abstract要約: 安全な処方薬を処方するための臨床診断支援システム(CDSS)として,新規な検索言語モデル(RAG-Large Language Model,LLM)を導入する。
このモデルは、患者コンテキストや制度ガイドラインに合わせて、関連する処方エラー警告を提供することによって、従来のルールベースのCDSSの制限に対処する。
- 参考スコア(独自算出の注目度): 3.963266190903893
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Importance: We introduce a novel Retrieval Augmented Generation (RAG)-Large
Language Model (LLM) as a Clinical Decision Support System (CDSS) for safe
medication prescription. This model addresses the limitations of traditional
rule-based CDSS by providing relevant prescribing error alerts tailored to
patient context and institutional guidelines.
Objective: The study evaluates the efficacy of an LLM-based CDSS in
identifying medication errors across various medical and surgical case
vignettes, compared to a human expert panel. It also examines clinician
preferences among different CDSS integration modalities: junior pharmacist,
LLM-based CDSS alone, and a combination of both.
Design, Setting, and Participants: Utilizing a RAG model with GPT-4.0, the
study involved 61 prescribing error scenarios within 23 clinical vignettes
across 12 specialties. An expert panel assessed these cases using the PCNE
classification and NCC MERP index. Three junior pharmacists independently
reviewed each vignette under simulated conditions.
Main Outcomes and Measures: The study assesses the LLM-based CDSS's accuracy,
precision, recall, and F1 scores in identifying Drug-Related Problems (DRPs),
compared to junior pharmacists alone or in an assistive mode with the CDSS.
Results: The co-pilot mode of RAG-LLM significantly improved DRP
identification accuracy by 22% over solo pharmacists. It showed higher recall
and F1 scores, indicating better detection of severe DRPs, despite a slight
decrease in precision. Accuracy varied across categories when pharmacists had
access to RAG-LLM responses.
Conclusions: The RAG-LLM based CDSS enhances medication error identification
accuracy when used with junior pharmacists, especially in detecting severe
DRPs.
- Abstract(参考訳): 重要度: 安全な医薬品処方のための臨床診断支援システムとして, LLM (Retrieval Augmented Generation)-Large Language Model) を導入した。
このモデルは、患者コンテキストや制度ガイドラインに合わせて、関連する処方エラー警告を提供することによって、従来のルールベースのCDSSの制限に対処する。
目的: 本研究は, llmベースのcdssが, ヒトの専門家パネルと比較し, 様々な医療・外科症例における薬剤エラーの同定に有効であることを評価する。
また, 若年薬剤師, LLMベースのCDSS単独, 両者の併用など,CDSS統合モードの異なる臨床的嗜好についても検討した。
設計、設定、参加者: GPT-4.0を用いたRAGモデルを用いて、研究は12の専門分野にわたる23の臨床ヴィグネット内で61のエラーシナリオを規定した。
専門家パネルはPCNE分類とNCC MERP指数を用いてこれらの症例を評価した。
3人の若い薬剤師がシミュレートされた条件でそれぞれのヴィグネットを独自にレビューした。
主な成果と対策:本研究は、LCMベースのCDSSの精度、精度、リコール、F1スコアを評価し、薬物関連問題(DRP)を特定する。
結果: RAG-LLMのコパイロットモードにより, DRPの同定精度は単独薬剤師より22%向上した。
再現率とF1スコアは高く, 精度はわずかに低下したが, 重篤なDRPの検出が良好であった。
薬剤師がRAG-LLM応答にアクセスできる場合、精度はカテゴリーによって異なる。
結論:RAG-LLMをベースとしたCDSSは,中年薬剤師との併用,特に重度のDRPの検出において,薬剤の誤検出精度を高める。
関連論文リスト
- Comprehensive and Practical Evaluation of Retrieval-Augmented Generation Systems for Medical Question Answering [70.44269982045415]
Retrieval-augmented Generation (RAG) は,大規模言語モデル (LLM) の性能向上のための有望なアプローチとして登場した。
医療用QAデータセットに様々な補助的要素を提供するMedRGB(MedRGB)を導入する。
実験結果から,検索した文書のノイズや誤情報の処理能力に限界があることが判明した。
論文 参考訳(メタデータ) (2024-11-14T06:19:18Z) - Language Models And A Second Opinion Use Case: The Pocket Professional [0.0]
本研究は、専門的な意思決定において、正式な第二意見ツールとして、LLM(Large Language Models)の役割を検証する。
この研究は、20ヶ月にわたるMedscapeからの183の挑戦的な医療事例を分析し、クラウドソースされた医師の反応に対して複数のLSMのパフォーマンスをテストした。
論文 参考訳(メタデータ) (2024-10-27T23:48:47Z) - MMed-RAG: Versatile Multimodal RAG System for Medical Vision Language Models [49.765466293296186]
近年,Med-LVLM (Med-LVLMs) の進歩により,対話型診断ツールの新たな可能性が高まっている。
Med-LVLMは、しばしば事実の幻覚に悩まされ、誤った診断につながることがある。
我々は,Med-LVLMの現実性を高めるために,多目的マルチモーダルRAGシステムMMed-RAGを提案する。
論文 参考訳(メタデータ) (2024-10-16T23:03:27Z) - Copiloting Diagnosis of Autism in Real Clinical Scenarios via LLMs [25.380978438307267]
我々はADOS-Copilotというフレームワークを提案し、スコアと説明のバランスをとる。
以上の結果から,本フレームワークは臨床医の診断と競合する可能性が示唆された。
論文 参考訳(メタデータ) (2024-10-08T04:48:42Z) - MAGDA: Multi-agent guideline-driven diagnostic assistance [43.15066219293877]
救急部門、地方病院、または未開発地域の診療所では、臨床医は訓練された放射線技師による高速な画像分析を欠いていることが多い。
本研究では,ゼロショットガイドライン駆動意思決定支援のための新しいアプローチを提案する。
我々は、患者診断に到達するために協調する、対照的な視覚言語モデルで強化された複数のLLMエージェントのシステムをモデル化する。
論文 参考訳(メタデータ) (2024-09-10T09:10:30Z) - AI Hospital: Benchmarking Large Language Models in a Multi-agent Medical Interaction Simulator [69.51568871044454]
我々は,emphDoctorをプレイヤとして,NPC間の動的医療相互作用をシミュレーションするフレームワークであるtextbfAI Hospitalを紹介した。
この設定は臨床シナリオにおけるLCMの現実的な評価を可能にする。
高品質な中国の医療記録とNPCを利用したマルチビュー医療評価ベンチマークを開発した。
論文 参考訳(メタデータ) (2024-02-15T06:46:48Z) - Combining Insights From Multiple Large Language Models Improves
Diagnostic Accuracy [0.0]
大きな言語モデル (LLM) は診断支援ツールとして提案されるか、あるいは "curbside consults" の代替として言及される。
個別の商業用LDMを問うことで得られた差分診断の精度を,同一LCMの組み合わせからの応答を集約して合成した差分診断の精度と比較した。
論文 参考訳(メタデータ) (2024-02-13T21:24:21Z) - Large Language Model Distilling Medication Recommendation Model [58.94186280631342]
大規模言語モデル(LLM)の強力な意味理解と入力非依存特性を利用する。
本研究は, LLMを用いて既存の薬剤推奨手法を変換することを目的としている。
これを軽減するため,LLMの習熟度をよりコンパクトなモデルに伝達する機能レベルの知識蒸留技術を開発した。
論文 参考訳(メタデータ) (2024-02-05T08:25:22Z) - Auditing Algorithmic Fairness in Machine Learning for Health with
Severity-Based LOGAN [70.76142503046782]
臨床予測タスクにおいて,局所バイアスを自動検出するSLOGANを用いて,機械学習ベースの医療ツールを補足することを提案する。
LOGANは、患者の重症度と過去の医療史における集団バイアス検出を文脈化することにより、既存のツールであるLOcal Group biAs detectioNに適応する。
SLOGANは, クラスタリング品質を維持しながら, 患者群の75%以上において, SLOGANよりも高い公平性を示す。
論文 参考訳(メタデータ) (2022-11-16T08:04:12Z) - Outlier-based Autism Detection using Longitudinal Structural MRI [6.311381904410801]
本稿では, 構造的磁気共鳴画像(sMRI)に基づく自閉症スペクトラム障害の診断を, 異常検出手法を用いて提案する。
GAN(Generative Adversarial Network)は、健康な被験者のsMRIスキャンでのみ訓練される。
実験の結果、ASD検出フレームワークは最先端のトレーニングデータと互換性があり、トレーニングデータもはるかに少ないことがわかった。
論文 参考訳(メタデータ) (2022-02-21T04:37:25Z) - Performance of Dual-Augmented Lagrangian Method and Common Spatial
Patterns applied in classification of Motor-Imagery BCI [68.8204255655161]
運動画像に基づく脳-コンピュータインタフェース(MI-BCI)は、神経リハビリテーションのための画期的な技術になる可能性がある。
使用する脳波信号のノイズの性質のため、信頼性の高いBCIシステムは特徴の最適化と抽出のために特別な手順を必要とする。
論文 参考訳(メタデータ) (2020-10-13T20:50:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。