論文の概要: Few Clicks Suffice: Active Test-Time Adaptation for Semantic
Segmentation
- arxiv url: http://arxiv.org/abs/2312.01835v1
- Date: Mon, 4 Dec 2023 12:16:02 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-05 15:13:04.914643
- Title: Few Clicks Suffice: Active Test-Time Adaptation for Semantic
Segmentation
- Title(参考訳): セマンティックセグメンテーションのためのアクティブなテスト時間適応
- Authors: Longhui Yuan and Shuang Li and Zhuo He and Binhui Xie
- Abstract要約: テスト時間適応(TTA)は、未ラベルのテストデータを使用した推論中に事前訓練されたモデルに適応する。
TTAアプローチと教師付きアプローチの間には,依然として大きなパフォーマンスギャップがあります。
本稿では,モデルアダプタとラベルアノテータの2つの部分からなるATASegフレームワークを提案する。
- 参考スコア(独自算出の注目度): 14.112999441288615
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Test-time adaptation (TTA) adapts the pre-trained models during inference
using unlabeled test data and has received a lot of research attention due to
its potential practical value. Unfortunately, without any label supervision,
existing TTA methods rely heavily on heuristic or empirical studies. Where to
update the model always falls into suboptimal or brings more computational
resource consumption. Meanwhile, there is still a significant performance gap
between the TTA approaches and their supervised counterparts. Motivated by
active learning, in this work, we propose the active test-time adaptation for
semantic segmentation setup. Specifically, we introduce the human-in-the-loop
pattern during the testing phase, which queries very few labels to facilitate
predictions and model updates in an online manner. To do so, we propose a
simple but effective ATASeg framework, which consists of two parts, i.e., model
adapter and label annotator. Extensive experiments demonstrate that ATASeg
bridges the performance gap between TTA methods and their supervised
counterparts with only extremely few annotations, even one click for labeling
surpasses known SOTA TTA methods by 2.6% average mIoU on ACDC benchmark.
Empirical results imply that progress in either the model adapter or the label
annotator will bring improvements to the ATASeg framework, giving it large
research and reality potential.
- Abstract(参考訳): テスト時間適応(TTA)は、未ラベルのテストデータを用いた推論中に事前訓練されたモデルに適応し、その潜在的な実用価値のために多くの研究の注目を集めている。
残念ながら、ラベルの監督がなければ、既存のTTA手法はヒューリスティックまたは経験的研究に大きく依存している。
モデルを更新する場所は常に最適以下、あるいはより多くの計算リソース消費をもたらす。
一方、TTAアプローチと教師付きアプローチの間には、依然として大きなパフォーマンスギャップがあります。
アクティブラーニングに動機づけられた本研究では,セマンティクスセグメンテーション設定のためのアクティブなテストタイム適応を提案する。
具体的には、テスト段階でのヒューマン・イン・ザ・ループパターンを導入し、少数のラベルをクエリして、オンラインでの予測とモデル更新を容易にする。
そこで我々は,モデルアダプタとラベルアノテータという2つの部分からなる,単純かつ効果的なatasegフレームワークを提案する。
広範な実験により、atasegは、ttaメソッドとその教師付きメソッド間のパフォーマンスギャップを極めて少ないアノテーションで橋渡しし、ラベル付けのためのワンクリックでさえ、accdcベンチマークにおいて、既知のsata ttaメソッドを2.6%平均して2.6%上回っている。
実証的な結果は、モデルアダプタまたはラベルアノテータの進歩がATASegフレームワークの改善をもたらし、大きな研究と現実の可能性をもたらすことを示唆している。
関連論文リスト
- Active Test-Time Adaptation: Theoretical Analyses and An Algorithm [51.84691955495693]
テスト時間適応(TTA)は、教師なし設定でストリーミングテストデータの分散シフトに対処する。
完全TTA設定内に能動学習を統合する能動テスト時間適応(ATTA)の新たな問題設定を提案する。
論文 参考訳(メタデータ) (2024-04-07T22:31:34Z) - Improving Entropy-Based Test-Time Adaptation from a Clustering View [15.157208389691238]
エントロピーベースのTTAについて,新たなクラスタリングの視点を導入する。
本稿では,ロバストなラベル割り当て,類似性保存制約,サンプル選択,勾配蓄積などを提案する。
実験結果から,本手法は様々なデータセットに対して一貫した改善が可能であることが示された。
論文 参考訳(メタデータ) (2023-10-31T10:10:48Z) - A Critical Look at Classic Test-Time Adaptation Methods in Semantic
Segmentation [20.583746370856552]
テスト時間適応(TTA)は、当初トレーニングデータに基づいてトレーニングされたモデルを、テストデータの潜在的分散シフトに適応することを目的としている。
既存のTTA研究の多くは分類タスクに重点を置いており、意味的セグメンテーションのためのTTAの探索において顕著なギャップを残している。
論文 参考訳(メタデータ) (2023-10-09T01:59:49Z) - On Pitfalls of Test-Time Adaptation [82.8392232222119]
TTA(Test-Time Adaptation)は、分散シフトの下で堅牢性に取り組むための有望なアプローチとして登場した。
TTABは,10の最先端アルゴリズム,多種多様な分散シフト,および2つの評価プロトコルを含むテスト時間適応ベンチマークである。
論文 参考訳(メタデータ) (2023-06-06T09:35:29Z) - Test-Time Adaptation with Perturbation Consistency Learning [32.58879780726279]
そこで本研究では, 分布変化のあるサンプルに対して, 安定な予測を行うための簡易なテスト時間適応手法を提案する。
提案手法は,強力なPLMバックボーンよりも推論時間が少なく,高い,あるいは同等の性能を実現することができる。
論文 参考訳(メタデータ) (2023-04-25T12:29:22Z) - Improved Test-Time Adaptation for Domain Generalization [48.239665441875374]
テストタイムトレーニング(TTT)は、学習したモデルにテストデータを適用する。
この作業は2つの主な要因に対処する: テストフェーズ中にアップデートする信頼性のあるパラメータを更新および識別するための適切な補助的TTTタスクを選択する。
トレーニングされたモデルに適応パラメータを追加し、テストフェーズでのみ適応パラメータを更新することを提案する。
論文 参考訳(メタデータ) (2023-04-10T10:12:38Z) - A Comprehensive Survey on Test-Time Adaptation under Distribution Shifts [143.14128737978342]
新たなパラダイムであるテスト時適応は、事前トレーニングされたモデルをテスト中にラベルのないデータに適用し、予測を行う可能性がある。
このパラダイムの最近の進歩は、推論に先立って自己適応モデルのトレーニングにラベルのないデータを活用するという大きな利点を浮き彫りにしている。
論文 参考訳(メタデータ) (2023-03-27T16:32:21Z) - Towards Stable Test-Time Adaptation in Dynamic Wild World [60.98073673220025]
テスト時間適応(TTA)は、与えられたモデルをテストサンプルに適応させることで、トレーニングとテストデータの分散シフトに取り組むのに有効であることが示されている。
TTAのオンラインモデル更新は不安定であり、これはしばしば既存のTTAメソッドが現実世界にデプロイされるのを防ぐ重要な障害である。
論文 参考訳(メタデータ) (2023-02-24T02:03:41Z) - Robust Continual Test-time Adaptation: Instance-aware BN and
Prediction-balanced Memory [58.72445309519892]
テストデータストリーム以外のデータストリームに対して堅牢な新しいテスト時間適応方式を提案する。
a)分布外サンプルの正規化を修正するIABN(Instance-Aware Batch Normalization)と、(b)クラスバランスのない方法で非i.d.ストリームからのデータストリームをシミュレートするPBRS(Predict- Balanced Reservoir Sampling)である。
論文 参考訳(メタデータ) (2022-08-10T03:05:46Z) - CAFA: Class-Aware Feature Alignment for Test-Time Adaptation [50.26963784271912]
テスト時間適応(TTA)は、テスト時にラベルのないデータにモデルを適応させることによって、この問題に対処することを目的としている。
本稿では,クラス認識特徴アライメント(CAFA, Class-Aware Feature Alignment)と呼ばれる単純な機能アライメント損失を提案する。
論文 参考訳(メタデータ) (2022-06-01T03:02:07Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。