論文の概要: Integrating Virtual Reality and Large Language Models for Team-Based Non-Technical Skills Training and Evaluation in the Operating Room
- arxiv url: http://arxiv.org/abs/2601.13406v1
- Date: Mon, 19 Jan 2026 21:34:00 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-01-21 22:47:23.067692
- Title: Integrating Virtual Reality and Large Language Models for Team-Based Non-Technical Skills Training and Evaluation in the Operating Room
- Title（参考訳）: 運用室におけるチームベースの非技術スキルトレーニングと評価のためのバーチャルリアリティと大規模言語モデルの統合
- Authors: Jacob Barker, Doga Demirel, Cullen Jackson, Anna Johansson, Robbin Miraglia, Darian Hoagland, Stephanie B. Jones, John Mitchell, Daniel B. Jones, Suvranu De,
- Abstract要約: 我々は,没入型チームシミュレーションと行動分析を統合したマルチユーザバーチャルリアリティ(VR)プラットフォームであるVirtual Operating Room Team Experience (VOR)を紹介した。
VORは、客観的アセスメントと自動化されたデータインフォームドデリゲートのためのスケーラブルでプライバシに準拠したフレームワークを提供する。
2024Sカンファレンスで12人の外科専門家がパイロットセッションを完了し、VORを直感的で没入的で、チームワークやコミュニケーションを開発する上で価値のあるものと評価した。
- 参考スコア（独自算出の注目度）: 0.5943985865141843
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Although effective teamwork and communication are critical to surgical safety, structured training for non-technical skills (NTS) remains limited compared with technical simulation. The ACS/APDS Phase III Team-Based Skills Curriculum calls for scalable tools that both teach and objectively assess these competencies during laparoscopic emergencies. We introduce the Virtual Operating Room Team Experience (VORTeX), a multi-user virtual reality (VR) platform that integrates immersive team simulation with large language model (LLM) analytics to train and evaluate communication, decision-making, teamwork, and leadership. Team dialogue is analyzed using structured prompts derived from the Non-Technical Skills for Surgeons (NOTSS) framework, enabling automated classification of behaviors and generation of directed interaction graphs that quantify communication structure and hierarchy. Two laparoscopic emergency scenarios, pneumothorax and intra-abdominal bleeding, were implemented to elicit realistic stress and collaboration. Twelve surgical professionals completed pilot sessions at the 2024 SAGES conference, rating VORTeX as intuitive, immersive, and valuable for developing teamwork and communication. The LLM consistently produced interpretable communication networks reflecting expected operative hierarchies, with surgeons as central integrators, nurses as initiators, and anesthesiologists as balanced intermediaries. By integrating immersive VR with LLM-driven behavioral analytics, VORTeX provides a scalable, privacy-compliant framework for objective assessment and automated, data-informed debriefing across distributed training environments.
- Abstract（参考訳）: 効果的なチームワークとコミュニケーションは外科的安全性にとって重要であるが、非技術スキル(NTS)のための構造化トレーニングは、技術シミュレーションと比較して制限されている。
ACS/APDS Phase III Team-Based Skills Curriculumは、腹腔鏡下緊急時にこれらの能力を教え、客観的に評価するスケーラブルなツールを求めている。
マルチユーザバーチャルリアリティ(VR)プラットフォームであるVirtual Operating Room Team Experience(VORTeX)を導入し,大規模言語モデル(LLM)分析と没入型チームシミュレーションを統合し,コミュニケーション,意思決定,チームワーク,リーダシップのトレーニングと評価を行う。
チーム対話は、Non-Technical Skills for Surgeons (NOTSS)フレームワークから派生した構造化プロンプトを用いて分析され、通信構造と階層を定量化するための行動の自動分類と指向的な相互作用グラフの生成を可能にする。
腹腔鏡下緊急手術(気胸,腹腔内出血)を施行した。
2024年のSAGESカンファレンスで12人の外科専門家がパイロットセッションを完了し、VORTeXを直感的で没入的で、チームワークやコミュニケーションを開発する上で価値のあるものと評価した。
LLMは、期待される手術階層を反映した解釈可能な通信ネットワークを一貫して作成し、外科医は中心的なインテグレータ、看護師は開始者、麻酔医はバランスの取れた仲介者であった。
没入型VRとLLM駆動の行動分析を統合することで、VORTeXは、分散トレーニング環境全体にわたって、客観的評価と自動化されたデータインフォームドデリゲートのためのスケーラブルでプライバシに準拠するフレームワークを提供する。
関連論文リスト
- An Agentic AI Framework for Training General Practitioner Student Skills [1.8865968025608468]
本稿では,一般学生のスキルを育成するためのエージェント・フレームワークを紹介し,エビデンスベースのビグネット生成,人格主導型患者対話,標準に基づく評価とフィードバックについて紹介する。
参加者は、現実的でヴィグネットに忠実な対話、適切な難易度調整、安定した性格信号、非常に有用なサンプルリッチフィードバックを報告した。
これらの結果は,信頼性と教育学的に価値のあるトレーニングツールを構築するための実践的パターンとして,シナリオ制御,インタラクション制御,標準に基づく評価のエージェント的分離を支援する。
論文 参考訳（メタデータ） (2025-12-20T17:26:39Z) - CLiVR: Conversational Learning System in Virtual Reality with AI-Powered Patients [0.0]
CLiVRは、大きな言語モデル、音声処理、および3Dアバターを統合する、仮想現実における会話学習システムである。
Unityで開発され、Meta Quest 3プラットフォームにデプロイされたCliVRは、トレーニング担当者が仮想患者と自然な対話を行うことを可能にする。
論文 参考訳（メタデータ） (2025-10-21T19:19:55Z) - Designing and Evaluating an AI-driven Immersive Multidisciplinary Simulation (AIMS) for Interprofessional Education [9.141423579002542]
AIMSは、大きな言語モデル(Gemini-2.5-Flash)、Unityベースの仮想環境エンジン、文字生成パイプラインを統合する仮想シミュレーションである。
AIMSは、薬局、医学、看護、ソーシャルワークの学生の間で、共同臨床推論と健康増進能力を高めるために設計された。
論文 参考訳（メタデータ） (2025-10-10T01:09:18Z) - Trainee Action Recognition through Interaction Analysis in CCATT Mixed-Reality Training [1.5641818606249476]
重要なケア航空輸送チームのメンバーは、飛行中に人工呼吸器、IVポンプ、吸引装置を管理することで重傷を負った兵士を安定させなければならない。
シミュレーションとマルチモーダルデータ分析の最近の進歩は、より客観的で包括的なパフォーマンス評価を可能にする。
本研究では, CCATT のメンバーが, エアロメディカル避難の高圧条件を再現する混合現実感シミュレーションを用いて, どのように訓練されているかを検討する。
論文 参考訳（メタデータ） (2025-09-22T15:19:45Z) - Casper: Inferring Diverse Intents for Assistive Teleoperation with Vision Language Models [50.19518681574399]
現実の遠隔操作における中心的な課題は、ロボットがユーザー制御入力から幅広い人間の意図を推測することである。
我々は、事前学習された視覚言語モデルに埋め込まれたコモンセンス知識を活用する、支援型遠隔操作システムであるCasperを紹介する。
我々は,Casperがタスク性能を改善し,人間の認知負荷を低減し,直接遠隔操作や補助遠隔操作のベースラインよりもユーザ満足度が高いことを示す。
論文 参考訳（メタデータ） (2025-06-17T17:06:43Z) - Adaptive-VP: A Framework for LLM-Based Virtual Patients that Adapts to Trainees' Dialogue to Facilitate Nurse Communication Training [12.26485086816235]
Adaptive-VPは、訓練生の入力に基づいてVPの振る舞いを動的に適応する対話生成フレームワークである。
臨床ベースでフレキシブルなVPシナリオを構築するパイプラインと、トレーニング担当者のコミュニケーションを評価し、VPレスポンスをリアルタイムで調整するモジュールシステムを備えている。
実践看護師のコーパスから,我々のコミュニケーションスキル評価メカニズムが実世界の熟練度を反映していることが判明した。
論文 参考訳（メタデータ） (2025-05-31T04:34:55Z) - Automating Feedback Analysis in Surgical Training: Detection, Categorization, and Assessment [65.70317151363204]
本研究は,非構造化現実記録からの外科的対話を再構築するための最初の枠組みを紹介する。
外科訓練では,ライブ手術中に訓練者に提供する形式的言語フィードバックは,安全性の確保,行動の即時修正,長期的スキル獲得の促進に不可欠である。
本フレームワークは,音声活動の検出,話者ダイアリゼーション,自動音声認識と,幻覚を除去する新たな拡張機能を統合する。
論文 参考訳（メタデータ） (2024-12-01T10:35:12Z) - Dr-LLaVA: Visual Instruction Tuning with Symbolic Clinical Grounding [53.629132242389716]
VLM(Vision-Language Models)は、医用画像を分析し、自然言語の相互作用に関与することによって、臨床医を支援する。
VLMはしばしば「幻覚的」な振る舞いを示し、文脈的マルチモーダル情報に基づかないテキスト出力を生成する。
本稿では,臨床推論の象徴的表現を用いて医療知識にVLMを基盤とする新たなアライメントアルゴリズムを提案する。
論文 参考訳（メタデータ） (2024-05-29T23:19:28Z) - Unified Human-Scene Interaction via Prompted Chain-of-Contacts [61.87652569413429]
HSI(Human-Scene Interaction)は、AIや仮想現実といった分野において重要なコンポーネントである。
本稿では,言語コマンドによる多様なインタラクションの統一制御を支援する統一型HSIフレームワークUniHSIを提案する。
論文 参考訳（メタデータ） (2023-09-14T17:59:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。