論文の概要: Technical Report for ICCV 2023 Visual Continual Learning Challenge:
Continuous Test-time Adaptation for Semantic Segmentation
- arxiv url: http://arxiv.org/abs/2310.13533v1
- Date: Fri, 20 Oct 2023 14:20:21 GMT
- ステータス: 処理完了
- システム内更新日: 2023-10-23 22:33:29.975556
- Title: Technical Report for ICCV 2023 Visual Continual Learning Challenge:
Continuous Test-time Adaptation for Semantic Segmentation
- Title(参考訳): iccv 2023 visual continual learning challenge: continuous test-time adaptation for semantic segmentation (iccv 2023) の報告
- Authors: Damian S\'ojka, Yuyang Liu, Dipam Goswami, Sebastian Cygert,
Bart{\l}omiej Twardowski, Joost van de Weijer
- Abstract要約: この課題の目標は、セマンティックセグメンテーションタスクのためのビデオシーケンスのドメインを徐々に変更するようにモデルを適応させるテスト時間適応(TTA)手法を開発することである。
TTA法は、各画像シーケンス(ビデオ)で別々に評価され、つまり、次のシーケンスの前に、モデルがソースモデル状態にリセットされる。
提案されたソリューションは、チャレンジで3位を獲得し、イノベーションアワードを受賞した。
- 参考スコア(独自算出の注目度): 18.299549256484887
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The goal of the challenge is to develop a test-time adaptation (TTA) method,
which could adapt the model to gradually changing domains in video sequences
for semantic segmentation task. It is based on a synthetic driving video
dataset - SHIFT. The source model is trained on images taken during daytime in
clear weather. Domain changes at test-time are mainly caused by varying weather
conditions and times of day. The TTA methods are evaluated in each image
sequence (video) separately, meaning the model is reset to the source model
state before the next sequence. Images come one by one and a prediction has to
be made at the arrival of each frame. Each sequence is composed of 401 images
and starts with the source domain, then gradually drifts to a different one
(changing weather or time of day) until the middle of the sequence. In the
second half of the sequence, the domain gradually shifts back to the source
one. Ground truth data is available only for the validation split of the SHIFT
dataset, in which there are only six sequences that start and end with the
source domain. We conduct an analysis specifically on those sequences. Ground
truth data for test split, on which the developed TTA methods are evaluated for
leader board ranking, are not publicly available.
The proposed solution secured a 3rd place in a challenge and received an
innovation award. Contrary to the solutions that scored better, we did not use
any external pretrained models or specialized data augmentations, to keep the
solutions as general as possible. We have focused on analyzing the
distributional shift and developing a method that could adapt to changing data
dynamics and generalize across different scenarios.
- Abstract(参考訳): この課題の目標は、セマンティックセグメンテーションタスクのためのビデオシーケンスのドメインを徐々に変更するようにモデルを適応させるテスト時間適応(TTA)手法を開発することである。
合成駆動ビデオデータセット - ShiFT をベースとしている。
ソースモデルは、晴れた天候で昼間に撮影された画像に基づいて訓練される。
テスト時のドメインの変更は、主に天候や時間帯によって引き起こされる。
TTA法は、各画像シーケンス(ビデオ)で別々に評価され、つまり、モデルは次のシーケンスの前にソースモデル状態にリセットされる。
画像はひとつずつ表示され、各フレームの到着時に予測される必要がある。
各シーケンスは401のイメージで構成され、ソースドメインから始まり、シーケンスの中央まで徐々に別のもの(天気や時間の変化)にドリフトする。
シーケンスの後半では、ドメインは徐々にソース1に戻る。
地上の真理データはShiftデータセットの検証分割のためにのみ利用可能で、ソースドメインで開始および終了する6つのシーケンスしか存在しない。
我々はこれらのシーケンスを特に分析する。
開発したtta法をリーダーボードランキングで評価するテスト分割のための根拠真理データは、公開されていない。
提案されたソリューションは、チャレンジで3位を獲得し、イノベーション賞を受賞した。
より良い結果を得たソリューションとは対照的に、私たちはソリューションを可能な限り一般的なものにするために、外部でトレーニング済みのモデルや特別なデータ拡張を使用しませんでした。
分散シフトの分析と、データダイナミクスの変化に適応し、さまざまなシナリオを一般化する手法の開発に重点を置いてきた。
関連論文リスト
- Towards Real-World Test-Time Adaptation: Tri-Net Self-Training with
Balanced Normalization [52.03927261909813]
既存の研究は、非I.d.データストリームと連続的なドメインシフトの下での実際のテスト時間適応を主に検討している。
我々は、最先端手法の失敗は、まず不均衡なテストデータに正規化層を無差別に適応させることによって生じると論じる。
TRIBEと呼ばれる最後のTTAモデルは、バランスの取れたバッチノーム層を持つトリネットアーキテクチャ上に構築されている。
論文 参考訳(メタデータ) (2023-09-26T14:06:26Z) - Universal Test-time Adaptation through Weight Ensembling, Diversity
Weighting, and Prior Correction [3.5139431332194198]
テスト時適応(TTA)はデプロイ後もモデルを更新し続け、現在のテストデータを活用する。
我々は、自己学習ベースの手法が対処しなければならないいくつかの課題を特定し、強調する。
モデルがバイアスを受けるのを防ぐために、データセットとモデルに依存しない確実性と多様性の重み付けを利用する。
論文 参考訳(メタデータ) (2023-06-01T13:16:10Z) - Transform-Equivariant Consistency Learning for Temporal Sentence
Grounding [66.10949751429781]
ビデオ毎により差別的な表現を学習するために,新しい同変一貫性規則学習フレームワークを導入する。
私たちのモチベーションは、クエリ誘導アクティビティの時間的境界を一貫して予測することにある。
特に,ビデオの完全性と滑らか性を高めるために,自己教師付き一貫性損失モジュールを考案した。
論文 参考訳(メタデータ) (2023-05-06T19:29:28Z) - Back to the Source: Diffusion-Driven Test-Time Adaptation [77.4229736436935]
テスト時間適応はテスト入力を利用し、シフトしたターゲットデータ上でテストした場合、ソースデータに基づいてトレーニングされたモデルの精度を向上させる。
代わりに、生成拡散モデルを用いて、すべてのテスト入力をソース領域に向けて投影することで、ターゲットデータを更新する。
論文 参考訳(メタデータ) (2022-07-07T17:14:10Z) - CAFA: Class-Aware Feature Alignment for Test-Time Adaptation [50.26963784271912]
テスト時間適応(TTA)は、テスト時にラベルのないデータにモデルを適応させることによって、この問題に対処することを目的としている。
本稿では,クラス認識特徴アライメント(CAFA, Class-Aware Feature Alignment)と呼ばれる単純な機能アライメント損失を提案する。
論文 参考訳(メタデータ) (2022-06-01T03:02:07Z) - Continual Test-Time Domain Adaptation [94.51284735268597]
テスト時ドメイン適応は、ソースデータを使用しずに、ソース事前訓練されたモデルをターゲットドメインに適応することを目的としている。
CoTTAは実装が容易で、市販の事前訓練モデルに簡単に組み込むことができる。
論文 参考訳(メタデータ) (2022-03-25T11:42:02Z) - ADATIME: A Benchmarking Suite for Domain Adaptation on Time Series Data [20.34427953468868]
教師なしドメイン適応手法は、トレーニングデータとは異なる分布を持つ可能性のあるラベルなしテストデータに基づいて、うまく一般化することを目的としている。
時系列ドメイン適応に関する既存の研究は、評価スキーム、データセット、バックボーンニューラルネットワークアーキテクチャの矛盾に悩まされている。
時系列データ上で異なるドメイン適応手法を体系的かつ適切に評価するベンチマーク評価スイート(AdaTime)を開発した。
論文 参考訳(メタデータ) (2022-03-15T23:55:05Z) - On-the-Fly Test-time Adaptation for Medical Image Segmentation [63.476899335138164]
ソースモデルをテスト時にターゲットデータに適応させることは、データシフト問題に対する効率的な解決策である。
本稿では、各畳み込みブロックに適応バッチ正規化層を設けるAdaptive UNetという新しいフレームワークを提案する。
テスト期間中、モデルは新しいテストイメージのみを取り込み、ドメインコードを生成して、テストデータに従ってソースモデルの特徴を適応させる。
論文 参考訳(メタデータ) (2022-03-10T18:51:29Z) - 1st Place Solution to VisDA-2020: Bias Elimination for Domain Adaptive
Pedestrian Re-identification [17.065458476210175]
本稿では,視覚領域適応チャレンジ(VisDA-2020)における領域適応型歩行者再識別(Re-ID)タスクを提案する。
ソースドメインとターゲットドメインの間の大きなギャップを考慮すると、ドメイン適応歩行者リidの性能に影響を与える2つのバイアスの解決に焦点をあてた。
私達の方法はテスト セットの76.56% mAPそして84.25%のランク-1を達成します。
論文 参考訳(メタデータ) (2020-12-25T03:02:46Z) - Self domain adapted network [6.040230864736051]
ドメインシフトは、臨床実践においてディープネットワークをデプロイする上で大きな問題である。
単体テスト対象に迅速に適応できる新しい自己ドメイン適応ネットワーク(SDA-Net)を提案する。
論文 参考訳(メタデータ) (2020-07-07T01:41:34Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。