論文の概要: Relational Subsets Knowledge Distillation for Long-tailed Retinal
Diseases Recognition
- arxiv url: http://arxiv.org/abs/2104.11057v1
- Date: Thu, 22 Apr 2021 13:39:33 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-23 13:52:22.500971
- Title: Relational Subsets Knowledge Distillation for Long-tailed Retinal
Diseases Recognition
- Title(参考訳): 長期網膜疾患認識のためのリレーショナルサブセット知識蒸留
- Authors: Lie Ju, Xin Wang, Lin Wang, Tongliang Liu, Xin Zhao, Tom Drummond,
Dwarikanath Mahapatra, Zongyuan Ge
- Abstract要約: 本研究では,長尾データを知識に基づいて複数のクラスサブセットに分割し,クラスサブセット学習を提案する。
モデルがサブセット固有の知識の学習に集中するように強制する。
提案手法は長期網膜疾患認識タスクに有効であることが判明した。
- 参考スコア(独自算出の注目度): 65.77962788209103
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In the real world, medical datasets often exhibit a long-tailed data
distribution (i.e., a few classes occupy most of the data, while most classes
have rarely few samples), which results in a challenging imbalance learning
scenario. For example, there are estimated more than 40 different kinds of
retinal diseases with variable morbidity, however with more than 30+ conditions
are very rare from the global patient cohorts, which results in a typical
long-tailed learning problem for deep learning-based screening models. In this
study, we propose class subset learning by dividing the long-tailed data into
multiple class subsets according to prior knowledge, such as regions and
phenotype information. It enforces the model to focus on learning the
subset-specific knowledge. More specifically, there are some relational classes
that reside in the fixed retinal regions, or some common pathological features
are observed in both the majority and minority conditions. With those subsets
learnt teacher models, then we are able to distill the multiple teacher models
into a unified model with weighted knowledge distillation loss. The proposed
framework proved to be effective for the long-tailed retinal diseases
recognition task. The experimental results on two different datasets
demonstrate that our method is flexible and can be easily plugged into many
other state-of-the-art techniques with significant improvements.
- Abstract(参考訳): 現実の世界では、医学データセットは長い尾を持つデータ分布を示すことが多く(一部のクラスはデータの大半を占めるが、ほとんどのクラスはサンプルをほとんど持たない)、これは挑戦的な不均衡学習シナリオをもたらす。
例えば、40種類以上の網膜疾患が様々な病原性を持つと推定されているが、30以上の条件を持つ患者は、世界的な患者コホートから非常に稀であり、ディープラーニングベースのスクリーニングモデルに典型的な長い尾の学習問題をもたらす。
本研究では,長期化データを,領域や表現型情報といった事前知識に基づいて複数のクラスサブセットに分割することで,クラスサブセット学習を提案する。
サブセット固有の知識を学ぶことに集中するようにモデルを強制する。
より具体的には、固定された網膜領域に存在する関係クラスがあるが、多数派と少数派の両方で共通の病理学的特徴が観察されている。
これらのサブセットが教師モデルを学ぶことにより、複数の教師モデルを重み付き知識蒸留損失を伴う統一モデルに蒸留することができる。
提案手法は長期網膜疾患認識タスクに有効であることが判明した。
2つの異なるデータセットにおける実験結果から,本手法は柔軟であり,多くの最先端技術に容易に接続でき,大幅な改善が得られている。
関連論文リスト
- Benchmarking In-the-wild Multimodal Disease Recognition and A Versatile Baseline [42.49727243388804]
そこで本研究では,植物病原体認識データセットを提案する。
病気のクラスが最も多いだけでなく、各疾患に関するテキストベースの記述も含んでいる。
提案したデータセットは,実世界の疾患認識手法を評価するための理想的なテストベッドとみなすことができる。
論文 参考訳(メタデータ) (2024-08-06T11:49:13Z) - Mine yOur owN Anatomy: Revisiting Medical Image Segmentation with Extremely Limited Labels [54.58539616385138]
我々は、Mine yOur owN Anatomy (MONA) と呼ばれる、新しい半教師付き2次元医用画像セグメンテーションフレームワークを紹介する。
まず、先行研究では、すべてのピクセルがモデルトレーニングに等しく重要であると論じており、我々はこの1つだけで意味のある解剖学的特徴を定義できないことを経験的に観察している。
第2に,医療画像を解剖学的特徴の集合に分解できるモデルを構築する。
論文 参考訳(メタデータ) (2022-09-27T15:50:31Z) - Continual Learning with Bayesian Model based on a Fixed Pre-trained
Feature Extractor [55.9023096444383]
現在のディープラーニングモデルは、新しいクラスを学ぶ際に古い知識を破滅的に忘れることによって特徴づけられる。
人間の脳における新しい知識の学習プロセスに着想を得て,連続学習のためのベイズ生成モデルを提案する。
論文 参考訳(メタデータ) (2022-04-28T08:41:51Z) - LifeLonger: A Benchmark for Continual Disease Classification [59.13735398630546]
MedMNISTコレクションの連続的な疾患分類のためのベンチマークであるLifeLongerを紹介する。
タスクとクラスでの病気の漸進的な学習は、モデルをスクラッチから再トレーニングすることなく、新しいサンプルを分類する問題に対処する。
クロスドメインインクリメンタル学習は、これまで得られた知識を維持しながら、異なる機関から派生したデータセットを扱う問題に対処する。
論文 参考訳(メタデータ) (2022-04-12T12:25:05Z) - Hierarchical Knowledge Guided Learning for Real-world Retinal Diseases
Recognition [20.88407972858568]
眼科AIで最近発表されたいくつかのデータセットは、40種類以上の網膜疾患からなり、複雑な異常と様々な致死性がある。
モデリングの観点からは、これらのデータセットでトレーニングされたほとんどのディープラーニングモデルは、まれな疾患に一般化する能力に欠ける可能性がある。
本稿では,網膜疾患認識のための長期データベースから深部ニューラルネットワークを学習するための新しい手法を提案する。
論文 参考訳(メタデータ) (2021-11-17T05:44:39Z) - Generalized Multi-Task Learning from Substantially Unlabeled
Multi-Source Medical Image Data [11.061381376559053]
MultiMixは、病気の分類と解剖学的セグメンテーションを半教師付きで共同で学習する、新しいマルチタスク学習モデルである。
トレーニングセットにおける多ソースラベル付きデータの多量化実験により,MultiMixの有効性が確認された。
論文 参考訳(メタデータ) (2021-10-25T18:09:19Z) - MultiMix: Sparingly Supervised, Extreme Multitask Learning From Medical
Images [13.690075845927606]
本稿では,病気の分類と解剖学的分類を軽視的に学習する新しいマルチタスク学習モデルであるMultiMixを提案する。
胸部X線画像からの肺炎の分類と肺の分画に対するマルチタスキングモデルの有効性について検討した。
論文 参考訳(メタデータ) (2020-10-28T03:47:29Z) - Select-ProtoNet: Learning to Select for Few-Shot Disease Subtype
Prediction [55.94378672172967]
本研究は, 類似患者のサブグループを同定し, 数発の疾患のサブタイプ予測問題に焦点を当てた。
新しいモデルを開発するためにメタラーニング技術を導入し、関連する臨床課題から共通の経験や知識を抽出する。
我々の新しいモデルは、単純だが効果的なメタ学習マシンであるPrototypeal Networkと呼ばれる、慎重に設計されたメタラーナーに基づいて構築されている。
論文 参考訳(メタデータ) (2020-09-02T02:50:30Z) - Modeling Shared Responses in Neuroimaging Studies through MultiView ICA [94.31804763196116]
被験者の大規模なコホートを含むグループ研究は、脳機能組織に関する一般的な結論を引き出す上で重要である。
グループ研究のための新しい多視点独立成分分析モデルを提案し、各被験者のデータを共有独立音源と雑音の線形結合としてモデル化する。
まず、fMRIデータを用いて、被験者間の共通音源の同定における感度の向上を示す。
論文 参考訳(メタデータ) (2020-06-11T17:29:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。