論文の概要: Follow My Eye: Using Gaze to Supervise Computer-Aided Diagnosis
- arxiv url: http://arxiv.org/abs/2204.02976v1
- Date: Wed, 6 Apr 2022 08:31:05 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-08 16:08:55.632727
- Title: Follow My Eye: Using Gaze to Supervise Computer-Aided Diagnosis
- Title(参考訳): 視線追跡: Gaze を用いたコンピュータ支援診断の監督
- Authors: Sheng Wang, Xi Ouyang, Tianming Liu, Qian Wang, Dinggang Shen
- Abstract要約: 医用画像を読む放射線科医の眼球運動は,DNNベースのコンピュータ支援診断システム(CAD)を訓練するための新たな指導形態であることが実証された。
画像を読んでいるときに、放射線科医の視線を記録します。
視線情報は処理され、アテンション一貫性モジュールを介してDNNの注意を監督するために使用される。
- 参考スコア(独自算出の注目度): 54.60796004113496
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: When deep neural network (DNN) was first introduced to the medical image
analysis community, researchers were impressed by its performance. However, it
is evident now that a large number of manually labeled data is often a must to
train a properly functioning DNN. This demand for supervision data and labels
is a major bottleneck in current medical image analysis, since collecting a
large number of annotations from experienced experts can be time-consuming and
expensive. In this paper, we demonstrate that the eye movement of radiologists
reading medical images can be a new form of supervision to train the DNN-based
computer-aided diagnosis (CAD) system. Particularly, we record the tracks of
the radiologists' gaze when they are reading images. The gaze information is
processed and then used to supervise the DNN's attention via an Attention
Consistency module. To the best of our knowledge, the above pipeline is among
the earliest efforts to leverage expert eye movement for deep-learning-based
CAD. We have conducted extensive experiments on knee X-ray images for
osteoarthritis assessment. The results show that our method can achieve
considerable improvement in diagnosis performance, with the help of gaze
supervision.
- Abstract(参考訳): deep neural network(dnn)が初めて医療画像解析コミュニティに紹介されたとき、研究者はそのパフォーマンスに感銘を受けた。
しかし、現在、大量の手動ラベル付きデータが、適切に機能するDNNを訓練する必要があることは明らかである。
この監視データとラベルの要求は、経験豊富な専門家から大量の注釈を集めるのに時間と費用がかかるため、現在の医療画像分析において大きなボトルネックとなっている。
本稿では,医用画像を読む放射線科医の眼球運動が,DNNベースのコンピュータ支援診断システム(CAD)を訓練するための新たな指導形態であることを示す。
特に画像を読む際、放射線科医の視線の軌跡を記録する。
視線情報は処理され、アテンション一貫性モジュールを介してDNNの注意を監督するために使用される。
我々の知る限り、上記のパイプラインは、ディープラーニングベースのCADに専門家の眼球運動を活用するための最も初期の試みの1つである。
変形性関節症に対する膝x線画像の広範な実験を行った。
以上の結果から,視線監視により診断性能が大幅に向上する可能性が示唆された。
関連論文リスト
- Gaze-directed Vision GNN for Mitigating Shortcut Learning in Medical Image [6.31072075551707]
GD-ViG(GD-ViG)と呼ばれる新しい視線指向ビジョンGNNを提案し,放射線科医の視覚パターンを専門知識として活用する。
2つの公開医療画像データセットの実験は、GD-ViGが最先端の手法より優れていることを示した。
論文 参考訳(メタデータ) (2024-06-20T07:16:41Z) - Object Detection for Automated Coronary Artery Using Deep Learning [0.0]
本稿では,冠動脈狭窄の部位を正確に同定するために,X線血管造影画像の物体検出法を応用した。
このモデルにより,狭窄箇所の自動的かつリアルタイムな検出が可能となり,決定プロセスの重要かつ機密性の高い支援が可能となった。
論文 参考訳(メタデータ) (2023-12-19T13:14:52Z) - Case Studies on X-Ray Imaging, MRI and Nuclear Imaging [0.0]
我々は、AIベースのアプローチ、特にCNN(Convolutional Neural Networks)の使用が、医療画像技術による疾患検出にどのように役立つかに焦点を当てる。
CNNは、生の入力画像から特徴を抽出できるため、画像解析の一般的な手法である。
論文 参考訳(メタデータ) (2023-06-03T09:05:35Z) - GazeGNN: A Gaze-Guided Graph Neural Network for Chest X-ray
Classification [9.266556662553345]
本稿では,視線誘導型グラフニューラルネットワークGazeGNNを提案する。
本研究では,本論文で初めてリアルタイム・リアルタイム・エンド・ツー・エンド病の分類アルゴリズムを開発した。
論文 参考訳(メタデータ) (2023-05-29T17:01:54Z) - Dynamic Graph Enhanced Contrastive Learning for Chest X-ray Report
Generation [92.73584302508907]
コントラスト学習を用いた医療レポート作成を支援するために,動的構造とノードを持つ知識グラフを提案する。
詳しくは、グラフの基本構造は一般知識から事前構築される。
各イメージ機能は、レポート生成のためにデコーダモジュールに入力する前に、独自の更新グラフに統合される。
論文 参考訳(メタデータ) (2023-03-18T03:53:43Z) - A Deep Learning Approach for the Segmentation of Electroencephalography
Data in Eye Tracking Applications [56.458448869572294]
脳波データの時系列セグメンテーションのための新しいフレームワークDETRtimeを紹介する。
エンドツーエンドのディープラーニングベースのフレームワークは、コンピュータビジョンの進歩を前面に立たせています。
我々のモデルは脳波睡眠ステージセグメンテーションのタスクにおいてよく一般化される。
論文 参考訳(メタデータ) (2022-06-17T10:17:24Z) - Leveraging Human Selective Attention for Medical Image Analysis with
Limited Training Data [72.1187887376849]
選択的な注意機構は、注意散らしの存在を無視することで、認知システムがタスク関連視覚的手がかりに焦点を合わせるのに役立つ。
本稿では,医療画像解析タスクにおいて,小さなトレーニングデータを用いたガベージを利用したフレームワークを提案する。
本手法は腫瘍の3次元分割と2次元胸部X線分類において優れた性能を示す。
論文 参考訳(メタデータ) (2021-12-02T07:55:25Z) - Voice-assisted Image Labelling for Endoscopic Ultrasound Classification
using Neural Networks [48.732863591145964]
本稿では,臨床医が提示した生音声からのEUS画像にラベルを付けるマルチモーダル畳み込みニューラルネットワークアーキテクチャを提案する。
その結果,5つのラベルを持つデータセットにおいて,画像レベルでの予測精度は76%であった。
論文 参考訳(メタデータ) (2021-10-12T21:22:24Z) - Anomaly Detection in Medical Imaging -- A Mini Review [0.2455468619225742]
本稿では,医療画像における関連異常検出論文の半発掘文献レビューを用いて,アプリケーションをクラスタリングする。
主な結果は、ラベル付きデータの必要性を減らすことで、現在の研究が主に動機付けされていることを示している。
また、脳MRI領域における多くの研究が成功し、OCTや胸部X線といったさらなる領域への応用の可能性を示している。
論文 参考訳(メタデータ) (2021-08-25T11:45:40Z) - An Interpretable Multiple-Instance Approach for the Detection of
referable Diabetic Retinopathy from Fundus Images [72.94446225783697]
基礎画像における参照糖尿病網膜症検出のための機械学習システムを提案する。
画像パッチから局所情報を抽出し,アテンション機構により効率的に組み合わせることで,高い分類精度を実現することができる。
我々は,現在入手可能な網膜画像データセットに対するアプローチを評価し,最先端の性能を示す。
論文 参考訳(メタデータ) (2021-03-02T13:14:15Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。