論文の概要: MET: Multimodal Perception of Engagement for Telehealth
- arxiv url: http://arxiv.org/abs/2011.08690v3
- Date: Mon, 22 Aug 2022 21:14:40 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-24 17:33:36.733127
- Title: MET: Multimodal Perception of Engagement for Telehealth
- Title(参考訳): met: テレヘルスにおけるエンゲージメントのマルチモーダル知覚
- Authors: Pooja Guhan and Naman Awasthi and and Kathryn McDonald and Kristin
Bussell and Dinesh Manocha and Gloria Reeves and Aniket Bera
- Abstract要約: ビデオから人間のエンゲージメントレベルを知覚する学習ベースアルゴリズムMETを提案する。
我々はメンタルヘルス患者のエンゲージメント検出のための新しいデータセットMEDICAをリリースした。
- 参考スコア(独自算出の注目度): 52.54282887530756
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We present MET, a learning-based algorithm for perceiving a human's level of
engagement from videos that give us access to only the face, speech and text.
We leverage latent vectors corresponding to Affective and Cognitive features
frequently used in psychology literature to understand a person's level of
engagement in a semi-supervised GAN-based framework. The method is extremely
useful in the case of telehealth. We showcase the efficacy of this method from
the perspective of mental health and more specifically how this can be
leveraged for a better understanding of patient engagement during telemental
health sessions. We also explore the usefulness of our framework and contrast
it against existing works in being able to estimate another important mental
health indicator, namely valence, and arousal. Our framework reports 40%
improvements in RMSE over SOTA method in Engagement Regression and 50%
improvements in RMSE over SOTA method in Valence-Arousal Regression. To tackle
the scarcity of publicly available datasets in the telemental health space, we
release a new dataset, MEDICA, for mental health patient engagement detection.
Our dataset, MEDICA consists of 1299 videos, each 3 seconds long. To the best
of our knowledge, our approach is the first method capable to model telemental
health session data based on psychology-driven Affective and Cognitive
features, which also accounts for data sparsity by leveraging a semi-supervised
setup. To assert the usefulness of our method, we will also compare the
association of the engagement values obtained from our model with the other
engagement measures used by psychotherapists.
- Abstract(参考訳): 我々は,顔,音声,テキストのみにアクセスできるビデオから,人間のエンゲージメントレベルを知覚する学習ベースアルゴリズムMETを提案する。
心理文学で頻繁に用いられる感情的・認知的特徴に対応する潜伏ベクトルを用いて、半教師付きganベースのフレームワークにおける個人の関与度レベルを理解する。
この方法は遠隔医療において極めて有用である。
本手法の有効性をメンタルヘルスの観点から示し,テレメンタルヘルスセッションにおける患者の関与の理解を深める上で,より具体的に活用できることを示す。
また,我々の枠組みの有用性について検討し,他の重要なメンタルヘルス指標である「ヴァレンス」と「覚醒」を推定する上で,既存の作業と対比する。
本フレームワークでは, エンゲージメント回帰における RMSE 法よりも 40% 改善, および RMSE 法より 50% 改善された Valence-Arousal Regression 法を報告する。
遠隔医療空間における公開データセットの不足に対処するため,メンタルヘルス患者のエンゲージメント検出のための新しいデータセットであるMEDICAをリリースする。
私たちのデータセットであるMEDICAは、3秒毎に1299の動画で構成されています。
我々の知識を最大限に活用するために,本手法は,心理駆動的感情的および認知的特徴に基づく遠隔医療セッションデータをモデル化できる最初の手法である。
また,本手法の有用性を主張するために,本モデルから得られたエンゲージメント値と,サイコセラピストが用いた他のエンゲージメント指標の関連性を比較する。
関連論文リスト
- SouLLMate: An Application Enhancing Diverse Mental Health Support with Adaptive LLMs, Prompt Engineering, and RAG Techniques [9.146311285410631]
メンタルヘルスの問題は個人の日常生活に大きな影響を及ぼすが、多くの人は利用可能なオンラインリソースでも必要な支援を受けていない。
この研究は、最先端のAI技術を通じて、多様な、アクセス可能な、スティグマのない、パーソナライズされた、リアルタイムのメンタルヘルスサポートを提供することを目的としている。
論文 参考訳(メタデータ) (2024-10-17T22:04:32Z) - Neuron-based Personality Trait Induction in Large Language Models [115.08894603023712]
大規模言語モデル (LLM) は、様々な性格特性をシミュレートする能力が増している。
LLMにおけるパーソナリティ特性誘導のためのニューロンに基づくアプローチを提案する。
論文 参考訳(メタデータ) (2024-10-16T07:47:45Z) - SouLLMate: An Adaptive LLM-Driven System for Advanced Mental Health Support and Assessment, Based on a Systematic Application Survey [9.146311285410631]
メンタルヘルスの問題は個人の日常生活に大きな影響を及ぼすが、多くの人は利用可能なオンラインリソースでも必要な支援を受けていない。
この研究は、最先端のAI技術を通じて、アクセス可能で、スティグマフリーで、パーソナライズされ、リアルタイムなメンタルヘルスサポートを提供することを目的としている。
論文 参考訳(メタデータ) (2024-10-06T17:11:29Z) - Analyzing Participants' Engagement during Online Meetings Using Unsupervised Remote Photoplethysmography with Behavioral Features [50.82725748981231]
エンゲージメント測定は、医療、教育、サービスに応用される。
生理的特徴と行動的特徴の使用は可能であるが、従来の生理的測定の非現実性は接触センサーの必要性により生じる。
コンタクトセンサの代替として, 教師なし光胸腺造影(胸腔鏡)の有用性を実証する。
論文 参考訳(メタデータ) (2024-04-05T20:39:16Z) - Differential Private Federated Transfer Learning for Mental Health Monitoring in Everyday Settings: A Case Study on Stress Detection [4.439102809224707]
メンタルヘルスの状況は、生活の質に対する悪影響を軽減するために、効率的なモニタリングを必要とする。
既存のアプローチは、現実世界のアプリケーションにおいて、特定のサイバー攻撃やデータ不足に対する脆弱性と戦っている。
メンタルヘルスモニタリングのための差分私的フェデレート・トランスファー学習フレームワークを導入し,データプライバシの向上とデータ満足度の向上を図る。
論文 参考訳(メタデータ) (2024-02-16T18:00:04Z) - From Classification to Clinical Insights: Towards Analyzing and Reasoning About Mobile and Behavioral Health Data With Large Language Models [21.427976533706737]
我々は,多センサデータから臨床的に有用な知見を合成するために,大規模言語モデルを活用する新しいアプローチを採っている。
うつ病や不安などの症状とデータの傾向がどのように関連しているかを,LSMを用いて推論する思考促進手法の連鎖を構築した。
GPT-4のようなモデルでは数値データの75%を正確に参照しており、臨床参加者は、この手法を用いて自己追跡データを解釈することへの強い関心を表明している。
論文 参考訳(メタデータ) (2023-11-21T23:53:27Z) - A Self-supervised Framework for Improved Data-Driven Monitoring of
Stress via Multi-modal Passive Sensing [7.084068935028644]
ストレス応答の生理的前駆体を追跡するための多モード半教師付きフレームワークを提案する。
本手法は,ウェアラブルデバイスと異なる領域と解像度のマルチモーダルデータの利用を可能にする。
実世界のデータのコーパスを用いて、知覚的ストレスに関するトレーニング実験を行う。
論文 参考訳(メタデータ) (2023-03-24T20:34:46Z) - Automated Fidelity Assessment for Strategy Training in Inpatient
Rehabilitation using Natural Language Processing [53.096237570992294]
戦略トレーニング (Strategy Training) とは、脳卒中後の認知障害患者に障害を減らすためのスキルを教える、リハビリテーションのアプローチである。
標準化された忠実度評価は治療原則の遵守度を測定するために用いられる。
本研究では,ルールベースNLPアルゴリズム,長短項メモリ(LSTM)モデル,および変換器(BERT)モデルからの双方向エンコーダ表現を開発した。
論文 参考訳(メタデータ) (2022-09-14T15:33:30Z) - Learning-based Computer-aided Prescription Model for Parkinson's
Disease: A Data-driven Perspective [61.70045118068213]
我々は、PD患者の症状と、神経科医が提供した処方薬を収集し、データセットを構築した。
そこで我々は、観察された症状と処方薬との関係を学習し、新しいコンピュータ支援処方薬モデルを構築した。
新来の患者に対しては、処方薬モデルにより、観察された症状に対して適切な処方薬を推奨できる(予測)。
論文 参考訳(メタデータ) (2020-07-31T14:34:35Z) - Detecting Parkinsonian Tremor from IMU Data Collected In-The-Wild using
Deep Multiple-Instance Learning [59.74684475991192]
パーキンソン病(英: Parkinson's Disease、PD)は、60歳以上の人口の約1%に影響を与える徐々に進化する神経学的疾患である。
PD症状には、震動、剛性、ブレイキネジアがある。
本稿では,スマートフォン端末から受信したIMU信号に基づいて,PDに関連するトレモラスなエピソードを自動的に識別する手法を提案する。
論文 参考訳(メタデータ) (2020-05-06T09:02:30Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。