論文の概要: End-To-End Prediction of Knee Osteoarthritis Progression With
Multi-Modal Transformers
- arxiv url: http://arxiv.org/abs/2307.00873v1
- Date: Mon, 3 Jul 2023 09:10:57 GMT
- ステータス: 処理完了
- システム内更新日: 2023-07-05 13:48:44.893281
- Title: End-To-End Prediction of Knee Osteoarthritis Progression With
Multi-Modal Transformers
- Title(参考訳): 多変圧器を用いた膝関節症進行の終末予測
- Authors: Egor Panfilov, Simo Saarakkala, Miika T. Nieminen, Aleksei Tiulpin
- Abstract要約: 変形性膝関節症(KOA)は慢性筋骨格疾患である。
我々は、Deep Learningの最近の進歩を活用し、膝画像データのマルチモーダル融合のための統一的なフレームワークを開発した。
追跡分析の結果,画像データからの予測は外傷後の被験者に対してより正確であることが示唆された。
- 参考スコア(独自算出の注目度): 2.9822184411723645
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Knee Osteoarthritis (KOA) is a highly prevalent chronic musculoskeletal
condition with no currently available treatment. The manifestation of KOA is
heterogeneous and prediction of its progression is challenging. Current
literature suggests that the use of multi-modal data and advanced modeling
methods, such as the ones based on Deep Learning, has promise in tackling this
challenge. To date, however, the evidence on the efficacy of this approach is
limited. In this study, we leveraged recent advances in Deep Learning and,
using a Transformer approach, developed a unified framework for the multi-modal
fusion of knee imaging data. Subsequently, we analyzed its performance across a
range of scenarios by investigating multiple progression horizons -- from
short-term to long-term. We report our findings using a large cohort
(n=2421-3967) derived from the Osteoarthritis Initiative dataset. We show that
structural knee MRI allows identifying radiographic KOA progressors on par with
multi-modal fusion approaches, achieving an area under the ROC curve (ROC AUC)
of 0.70-0.76 and Average Precision (AP) of 0.15-0.54 in 2-8 year horizons.
Progression within 1 year was better predicted with a multi-modal method using
X-ray, structural, and compositional MR images -- ROC AUC of 0.76(0.04), AP of
0.13(0.04) -- or via clinical data. Our follow-up analysis generally shows that
prediction from the imaging data is more accurate for post-traumatic subjects,
and we further investigate which subject subgroups may benefit the most. The
present study provides novel insights into multi-modal imaging of KOA and
brings a unified data-driven framework for studying its progression in an
end-to-end manner, providing new tools for the design of more efficient
clinical trials. The source code of our framework and the pre-trained models
are made publicly available.
- Abstract(参考訳): 変形性膝関節症(koa)は慢性筋骨格疾患であり、現在治療されていない。
KOAの出現は異種であり、その進行の予測は困難である。
現在の文献では、ディープラーニングに基づくようなマルチモーダルデータや高度なモデリング手法の使用は、この問題に対処することを約束している。
しかし、今のところ、このアプローチの有効性の証拠は限られている。
本研究では,Deep Learningの最近の進歩を活用し,Transformerアプローチを用いて膝画像データのマルチモーダル融合のための統合フレームワークを開発した。
その後、短期から長期にわたる複数の進行地平線を調査し、その性能を様々なシナリオで分析した。
関節症イニシアチブデータセットから得られた大コホート(n=2421-3967)を用いて報告する。
また,roc曲線 (roc auc) 下の領域は0.70-0.76であり, 平均精度 (ap) は0.15-0.54である。
1年以内の進行は、X線、構造、合成MR画像(ROC AUCは0.76(0.04)、APは0.13(0.04))、または臨床データによって予測された。
追跡分析の結果,画像データからの予測は外傷後の被験者にとってより正確であり,どのサブグループが最も有益かについても検討した。
本研究は,koaのマルチモーダルイメージングに関する新たな知見を提供し,その進歩をエンドツーエンドで研究するための統一的なデータ駆動フレームワークを提供し,より効率的な臨床試験の設計のための新しいツールを提供する。
フレームワークのソースコードと事前訓練されたモデルが公開されています。
関連論文リスト
- Towards a Benchmark for Colorectal Cancer Segmentation in Endorectal Ultrasound Videos: Dataset and Model Development [59.74920439478643]
本稿では,多様なERUSシナリオをカバーする最初のベンチマークデータセットを収集し,注釈付けする。
ERUS-10Kデータセットは77の動画と10,000の高解像度アノテートフレームで構成されています。
本稿では,ASTR (Adaptive Sparse-context TRansformer) という大腸癌セグメンテーションのベンチマークモデルを提案する。
論文 参考訳(メタデータ) (2024-08-19T15:04:42Z) - Identity-Consistent Diffusion Network for Grading Knee Osteoarthritis Progression in Radiographic Imaging [22.005283322766832]
変形性膝関節症(KOA)は、身体障害を引き起こす関節炎の一般的な形態である。
KOAの重症度と進行度を自動的に評価するコンピュータ支援技術は、KOA治療と疾患管理に大きな効果がある。
本研究では, IC-RDN(Identity-Consistent Radiographic Diffusion Network)という新しい生成モデルを提案する。
論文 参考訳(メタデータ) (2024-07-31T07:12:06Z) - Beyond Images: An Integrative Multi-modal Approach to Chest X-Ray Report
Generation [47.250147322130545]
画像からテキストまでの放射線学レポート生成は,医療画像の発見を記述した放射線学レポートを自動生成することを目的としている。
既存の方法の多くは画像データのみに焦点をあてており、他の患者情報は放射線科医に公開されていない。
胸部X線レポートを生成するための多モードディープニューラルネットワークフレームワークを,非構造的臨床ノートとともにバイタルサインや症状などの構造化された患者データを統合することで提案する。
論文 参考訳(メタデータ) (2023-11-18T14:37:53Z) - Automatic diagnosis of knee osteoarthritis severity using Swin
transformer [55.01037422579516]
変形性膝関節症 (KOA) は膝関節の慢性的な痛みと硬直を引き起こす疾患である。
我々は,Swin Transformer を用いて KOA の重大度を予測する自動手法を提案する。
論文 参考訳(メタデータ) (2023-07-10T09:49:30Z) - Deep Learning for Predicting Progression of Patellofemoral
Osteoarthritis Based on Lateral Knee Radiographs, Demographic Data and
Symptomatic Assessments [1.1549572298362785]
本研究はMOST研究のベースラインから被験者(被験者1832名,膝3276名)を抽出した。
PF関節領域は, 側膝X線上の自動ランドマーク検出ツール(BoneFinder)を用いて同定した。
年齢、性別、BMIおよびWOMACスコア、および大腿骨関節X線学的関節炎ステージ(KLスコア)の危険因子について
論文 参考訳(メタデータ) (2023-05-10T06:43:33Z) - Drug Synergistic Combinations Predictions via Large-Scale Pre-Training
and Graph Structure Learning [82.93806087715507]
薬物併用療法は、より有効で安全性の低い疾患治療のための確立された戦略である。
ディープラーニングモデルは、シナジスティックな組み合わせを発見する効率的な方法として登場した。
我々のフレームワークは、他のディープラーニングベースの手法と比較して最先端の結果を達成する。
論文 参考訳(メタデータ) (2023-01-14T15:07:43Z) - RadioPathomics: Multimodal Learning in Non-Small Cell Lung Cancer for
Adaptive Radiotherapy [1.8161758803237067]
非小細胞肺癌に対する放射線治療成績を予測するため, マルチモーダルレイトフュージョン法を開発した。
実験により、AUCが90.9%ドルと同等のマルチモーダルパラダイムが、各ユニモーダルアプローチより優れていることが示された。
論文 参考訳(メタデータ) (2022-04-26T16:32:52Z) - Multi-objective optimization determines when, which and how to fuse deep
networks: an application to predict COVID-19 outcomes [1.8351254916713304]
マルチモーダル・エンド・ツー・エンドモデルのセットアップを最適化する新しい手法を提案する。
我々はAIforCOVIDデータセット上でテストを行い、最先端の結果を得た。
論文 参考訳(メタデータ) (2022-04-07T23:07:33Z) - Knee Osteoarthritis Severity Prediction using an Attentive Multi-Scale
Deep Convolutional Neural Network [8.950918531231158]
本稿では,KellgrenおよびLawrenceグレードの分類をX線から自動的に評価する,深層学習ベースのフレームワークであるOsteHRNetを提案する。
提案モデルでは,OAIデータセットのベースラインコホートにおいて,71.74%,0.311のMAEが最良である。
論文 参考訳(メタデータ) (2021-06-27T17:29:46Z) - Explaining Clinical Decision Support Systems in Medical Imaging using
Cycle-Consistent Activation Maximization [112.2628296775395]
ディープニューラルネットワークを用いた臨床意思決定支援は、着実に関心が高まりつつあるトピックとなっている。
臨床医は、その根底にある意思決定プロセスが不透明で理解しにくいため、この技術の採用をためらうことが多い。
そこで我々は,より小さなデータセットであっても,分類器決定の高品質な可視化を生成するCycleGANアクティベーションに基づく,新たな意思決定手法を提案する。
論文 参考訳(メタデータ) (2020-10-09T14:39:27Z) - MIA-Prognosis: A Deep Learning Framework to Predict Therapy Response [58.0291320452122]
本稿では,患者の予後と治療反応を予測するための統合型深層学習手法を提案する。
我々は,マルチモーダル非同期時系列分類タスクとして,確率モデリングを定式化する。
我々の予測モデルは、長期生存の観点から、低リスク、高リスクの患者をさらに階層化する可能性がある。
論文 参考訳(メタデータ) (2020-10-08T15:30:17Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。