論文の概要: Taxonomy Adaptive Cross-Domain Adaptation in Medical Imaging via
Optimization Trajectory Distillation
- arxiv url: http://arxiv.org/abs/2307.14709v1
- Date: Thu, 27 Jul 2023 08:58:05 GMT
- ステータス: 処理完了
- システム内更新日: 2023-07-28 15:10:58.586481
- Title: Taxonomy Adaptive Cross-Domain Adaptation in Medical Imaging via
Optimization Trajectory Distillation
- Title(参考訳): 最適化トラジェクトリ蒸留による医用画像の分類適応型クロスドメイン適応
- Authors: Jianan Fan, Dongnan Liu, Hang Chang, Heng Huang, Mei Chen, and Weidong
Cai
- Abstract要約: 自動医用画像解析の成功は、大規模かつ専門家による注釈付きトレーニングセットに依存する。
非教師なしドメイン適応(UDA)はラベル付きデータ収集の負担を軽減するための有望なアプローチである。
本稿では,2つの技術的課題に新しい視点から対処する統一的手法である最適化トラジェクトリ蒸留を提案する。
- 参考スコア(独自算出の注目度): 73.83178465971552
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The success of automated medical image analysis depends on large-scale and
expert-annotated training sets. Unsupervised domain adaptation (UDA) has been
raised as a promising approach to alleviate the burden of labeled data
collection. However, they generally operate under the closed-set adaptation
setting assuming an identical label set between the source and target domains,
which is over-restrictive in clinical practice where new classes commonly exist
across datasets due to taxonomic inconsistency. While several methods have been
presented to tackle both domain shifts and incoherent label sets, none of them
take into account the common characteristics of the two issues and consider the
learning dynamics along network training. In this work, we propose optimization
trajectory distillation, a unified approach to address the two technical
challenges from a new perspective. It exploits the low-rank nature of gradient
space and devises a dual-stream distillation algorithm to regularize the
learning dynamics of insufficiently annotated domain and classes with the
external guidance obtained from reliable sources. Our approach resolves the
issue of inadequate navigation along network optimization, which is the major
obstacle in the taxonomy adaptive cross-domain adaptation scenario. We evaluate
the proposed method extensively on several tasks towards various endpoints with
clinical and open-world significance. The results demonstrate its effectiveness
and improvements over previous methods.
- Abstract(参考訳): 自動医療画像解析の成功は、大規模かつ専門的な訓練セットに依存する。
非教師なしドメイン適応(UDA)はラベル付きデータ収集の負担を軽減するための有望なアプローチである。
しかし、それらは一般的に、ソースドメインとターゲットドメインの間の同一のラベルセットを仮定したクローズドセット適応設定の下で動作し、分類学的不整合のためにデータセットにまたがる新しいクラスが一般的に存在する臨床実践では過度に制限されている。
ドメインシフトと非一貫性ラベル集合の両方に取り組むためのいくつかの方法が提示されているが、これらの2つの問題の共通的な特徴を考慮に入れず、ネットワークトレーニングにおける学習ダイナミクスを検討する。
本研究では,新しい視点から2つの技術的課題に取り組むための統一的アプローチである最適化軌道蒸留を提案する。
勾配空間の低位の性質を活用し、信頼性の高い情報源から得られた外部指導により、不十分な注釈付きドメインとクラスの学習ダイナミクスを規則化する双流蒸留アルゴリズムを考案する。
本手法は,適応型クロスドメイン適応シナリオにおける主要な障害であるネットワーク最適化における不適切なナビゲーションの問題を解決する。
提案手法は, 臨床的, 開放的意義のある様々なエンドポイントに向けて, 様々なタスクで広範囲に評価する。
その結果,従来の方法よりも効果と改善が示された。
関連論文リスト
- Domain-Adaptive Learning: Unsupervised Adaptation for Histology Images
with Improved Loss Function Combination [3.004632712148892]
本稿では,H&E染色組織像を対象とした非教師なし領域適応(UDA)のための新しいアプローチを提案する。
本手法では, 組織像に特有の課題に対処するために, 慎重に選択された既存の損失関数とともに, 新たな損失関数を提案する。
提案手法は, 組織像の最先端技術を超え, 精度, 堅牢性, 一般化の面で広く評価されている。
論文 参考訳(メタデータ) (2023-09-29T12:11:16Z) - Joint Attention-Driven Domain Fusion and Noise-Tolerant Learning for
Multi-Source Domain Adaptation [2.734665397040629]
マルチソースUnsupervised Domain Adaptationはラベル付きデータを持つ複数のソースドメインからラベル付きターゲットドメインに知識を転送する。
異なるドメインとターゲットドメイン内のノイズの多い擬似ラベル間の分散の相違は、どちらもパフォーマンスのボトルネックにつながる。
本稿では,意識駆動型ドメイン融合(ADNT)と雑音耐性学習(ADNT)を統合し,上記の2つの問題に対処するアプローチを提案する。
論文 参考訳(メタデータ) (2022-08-05T01:08:41Z) - Semi-supervised Domain Adaptive Structure Learning [72.01544419893628]
半教師付きドメイン適応 (SSDA) は,1) アノテーションの低いデータに過度に適合する手法と,2) ドメイン間の分散シフトの両方を克服しなければならない課題である。
SSLとDAの協調を正規化するための適応型構造学習手法を提案する。
論文 参考訳(メタデータ) (2021-12-12T06:11:16Z) - Unsupervised Noise Adaptive Speech Enhancement by
Discriminator-Constrained Optimal Transport [25.746489468835357]
本稿では、音声強調(SE)のための教師なし領域適応を行う新しい識別器制約付き最適輸送ネットワーク(DOTN)を提案する。
DOTNは、ソースドメインから利用可能な知識を利用して、ターゲットドメインにおけるノイズの多い音声のクリーンな参照を推定することを目的としている。
論文 参考訳(メタデータ) (2021-11-11T17:15:37Z) - Improving Transferability of Domain Adaptation Networks Through Domain
Alignment Layers [1.3766148734487902]
マルチソースアン教師付きドメイン適応(MSDA)は、ソースモデルの袋から弱い知識を割り当てることで、ラベルのないドメインの予測子を学習することを目的としている。
我々は,DomaIn Alignment Layers (MS-DIAL) のマルチソースバージョンを予測器の異なるレベルに埋め込むことを提案する。
我々の手法は最先端のMSDA法を改善することができ、分類精度の相対利得は+30.64%に達する。
論文 参考訳(メタデータ) (2021-09-06T18:41:19Z) - Contrastive Learning and Self-Training for Unsupervised Domain
Adaptation in Semantic Segmentation [71.77083272602525]
UDAはラベル付きソースドメインからラベルなしターゲットドメインへの効率的な知識伝達を試みている。
本稿では,領域にまたがるカテゴリ別センタロイドを適応させるコントラスト学習手法を提案する。
提案手法を自己学習で拡張し,メモリ効率の良い時間アンサンブルを用いて一貫性と信頼性の高い擬似ラベルを生成する。
論文 参考訳(メタデータ) (2021-05-05T11:55:53Z) - Selective Pseudo-Labeling with Reinforcement Learning for
Semi-Supervised Domain Adaptation [116.48885692054724]
半教師付きドメイン適応のための強化学習に基づく選択擬似ラベル法を提案する。
高精度かつ代表的な擬似ラベルインスタンスを選択するための深層Q-ラーニングモデルを開発する。
提案手法は, SSDAのベンチマークデータセットを用いて評価し, 全ての比較手法よりも優れた性能を示す。
論文 参考訳(メタデータ) (2020-12-07T03:37:38Z) - A Review of Single-Source Deep Unsupervised Visual Domain Adaptation [81.07994783143533]
大規模ラベル付きトレーニングデータセットにより、ディープニューラルネットワークは、幅広いベンチマークビジョンタスクを拡張できるようになった。
多くのアプリケーションにおいて、大量のラベル付きデータを取得するのは非常に高価で時間を要する。
限られたラベル付きトレーニングデータに対処するため、大規模ラベル付きソースドメインでトレーニングされたモデルを、疎ラベルまたは未ラベルのターゲットドメインに直接適用しようと試みている人も多い。
論文 参考訳(メタデータ) (2020-09-01T00:06:50Z) - Adaptively-Accumulated Knowledge Transfer for Partial Domain Adaptation [66.74638960925854]
部分ドメイン適応(PDA)は、ソースドメインラベル空間がターゲットドメインを置き換えるとき、現実的で困難な問題を扱う。
本稿では,2つの領域にまたがる関連カテゴリを整合させる適応的知識伝達フレームワーク(A$2KT)を提案する。
論文 参考訳(メタデータ) (2020-08-27T00:53:43Z) - Discriminative Active Learning for Domain Adaptation [16.004653151961303]
我々は、データアノテーションの労力を減らすために、ドメイン適応のための差別的なアクティブな学習手法を導入する。
具体的には,ニューラルネットワークの3段階能動対向トレーニングを提案する。
4つのベンチマークデータセットを用いた既存領域適応手法との比較実験により,提案手法の有効性が示された。
論文 参考訳(メタデータ) (2020-05-24T04:20:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。