論文の概要: Boundary Voting Network for Ambiguity-Aware Timestamp-Supervised Action Segmentation
- arxiv url: http://arxiv.org/abs/2609.08167v1
- Date: Tue, 08 Sep 2026 02:58:54 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-11 20:45:22.074002
- Title: Boundary Voting Network for Ambiguity-Aware Timestamp-Supervised Action Segmentation
- Title(参考訳): あいまいさを考慮したタイムスタンプ監督行動セグメンテーションのための境界投票ネットワーク
- Abstract要約: タイムスタンプ管理されたアクションセグメンテーションは、アクション毎に注釈付けされたランダムなフレームで、未トリミングされたビデオのアクションを分割し分類することを目的としている。
本稿では,映像レベルのグローバルな事前知識を局所的な行動伝達領域に階層的に伝播させることにより,特徴のあいまいさを軽減する境界投票ネットワークを提案する。
- 参考スコア(独自算出の注目度): 45.84397725976746
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Timestamp-supervised action segmentation aims to segment and classify actions in untrimmed videos with a random frame annotated per action. Precisely localizing action boundaries from timestamp annotations is crucial for this setting, as it enables generating framewise pseudo-labels and applying the well-explored fully-supervised training. However, prevailing methods struggle with intrinsic uncertainty in boundary localization due to less discriminative features in action-transiting regions. This imprecise boundary estimation significantly reduces the stability and reliability of the generated pseudo-labels in ambiguous action-transiting regions, consequently resulting in performance deterioration of the trained segmentation models. In our paper, we introduce the boundary voting network that mitigates feature ambiguity by hierarchically propagating video-level global prior knowledge into local action-transiting regions. By generating key action representations as votes throughout the video and targeting action-transiting regions, all votes collaboratively contribute to action-transiting feature enhancement and boundary localization refinement. Extensive experiments demonstrate the effectiveness of our method on GTEA, 50Salads, and Breakfast datasets.
- Abstract(参考訳): タイムスタンプ管理されたアクションセグメンテーションは、アクション毎に注釈付けされたランダムなフレームで、未トリミングされたビデオのアクションを分割し分類することを目的としている。
タイムスタンプアノテーションからのアクション境界の正確なローカライズは、フレームワイドな擬似ラベルの生成と、十分に探索された完全教師付きトレーニングの適用を可能にするため、この設定に不可欠である。
しかし, 行動伝達領域における識別的特徴の低下により, 境界局所化の本質的不確実性に悩まされる。
この不正確な境界推定は、曖昧な動作遷移領域における生成した擬似ラベルの安定性と信頼性を著しく低下させ、結果として訓練されたセグメンテーションモデルの性能劣化をもたらす。
本稿では,映像レベルのグローバルな事前知識を局所的な行動伝達領域に階層的に伝播させることにより,特徴の曖昧性を緩和する境界投票ネットワークを提案する。
ビデオ全体を通じて主要なアクション表現を投票として生成し、アクショントランジット領域をターゲットにすることで、すべての投票が協調してアクショントランジット機能の強化と境界ローカライゼーションの洗練に寄与する。
GTEA、50Salads、Breakfastデータセットに対する我々の手法の有効性を示す大規模な実験を行った。
関連論文リスト
- Boundary-Centric Active Learning for Temporal Action Segmentation [0.34785805439031336]
B-ACTは,高平均境界領域に監督を明示的に割り当てる,クリップ予算のアクティブラーニングフレームワークである。
B-ACTは階層的な2段階のループで動作し、 (i) 予測の不確実性を用いてラベル付きビデオのランク付けとクエリを行い、 (ii) 選択されたビデオの中からトップ$K$境界を選択する。
論文 参考訳(メタデータ) (2026-04-16T15:50:21Z) - Weakly-Supervised Temporal Action Localization with Bidirectional
Semantic Consistency Constraint [83.36913240873236]
WTAL(Weakly Supervised Temporal Action Localization)は、ビデオの時間的境界を分類し、ローカライズすることを目的としている。
本研究では,双方向意味整合性制約 (Bi-SCC) という単純な手法を提案する。
実験結果から,THUMOS14とActivityNetの最先端手法よりも優れた結果が得られた。
論文 参考訳(メタデータ) (2023-04-25T07:20:33Z) - Weakly-Supervised Temporal Action Localization by Inferring Salient
Snippet-Feature [26.7937345622207]
弱教師付き時間的アクションローカライゼーションは、教師なしビデオ内のアクション領域を特定し、アクションカテゴリを同時に特定することを目的としている。
擬似ラベル生成は、この課題を解決するための有望な戦略であるが、現在の手法ではビデオの自然な時間構造を無視している。
そこで本研究では,有意なスニペット特徴を推定し,時間的動作の局所化を弱く制御する手法を提案する。
論文 参考訳(メタデータ) (2023-03-22T06:08:34Z) - Video Activity Localisation with Uncertainties in Temporal Boundary [74.7263952414899]
時間とともにビデオ活動のローカライゼーションを行う方法は、時間的境界が決定され正確であると暗黙的に仮定する。
無記述の自然ビデオでは、異なるアクティビティがスムーズに移動するため、アクティビティの開始と終了が時間とともに正確にラベル付けされることは本質的に曖昧である。
フレキシブルかつ適応的な活動時間境界に対応するための弾性モーメントバウンディング(EMB)を導入する。
論文 参考訳(メタデータ) (2022-06-26T16:45:56Z) - Transferable Knowledge-Based Multi-Granularity Aggregation Network for
Temporal Action Localization: Submission to ActivityNet Challenge 2021 [33.840281113206444]
本報告では,2021 HACS 時空間行動ローカライゼーションチャレンジの提出に使用したソリューションの概要について述べる。
我々は、TCANet(Temporal Context Aggregation Network)を用いて、高品質なアクション提案を生成する。
また、トリミングされたビデオから未トリミングされたビデオに知識を移すための追加モジュールも採用しています。
提案手法は, 教師付きおよび弱教師付き時間的行動局所化トラックを用いて, 39.91 と 29.78 の平均 mAP をそれぞれ達成する。
論文 参考訳(メタデータ) (2021-07-27T06:18:21Z) - Action Shuffling for Weakly Supervised Temporal Localization [22.43209053892713]
本稿では,行動の秩序感応性と位置感応性を解析する。
それらを自己拡張学習フレームワークに具体化し、弱教師付きアクションローカライゼーション性能を改善する。
論文 参考訳(メタデータ) (2021-05-10T09:05:58Z) - Weakly Supervised Temporal Action Localization Through Learning Explicit
Subspaces for Action and Context [151.23835595907596]
ビデオレベルの監視のみの下で、アクションインスタンスの時間的開始と終了をローカライズする方法を学ぶ。
アクションとコンテキストそれぞれについて,2つの機能サブスペースを学習するフレームワークを提案する。
提案手法は3つのベンチマークで最先端のWS-TAL法より優れている。
論文 参考訳(メタデータ) (2021-03-30T08:26:53Z) - Temporal Context Aggregation Network for Temporal Action Proposal
Refinement [93.03730692520999]
時間的行動提案生成はビデオ理解分野において難しいが重要な課題である。
現在の方法はまだ不正確な時間境界と検索に使用される劣った自信に苦しんでいます。
TCANet は、「ローカルおよびグローバル」な時間的コンテキストアグリゲーションを通じて、高品質のアクション提案を生成するために提案します。
論文 参考訳(メタデータ) (2021-03-24T12:34:49Z) - Weakly Supervised Temporal Action Localization with Segment-Level Labels [140.68096218667162]
時間的アクションローカライゼーションは、テストパフォーマンスとアノテーション時間コストのトレードオフを示す。
ここでは、アノテーションがアクションを観察するときにセグメントがラベル付けされる。
我々は、ラベル付きセグメントから積分的な動作部分を学ぶために、損失サンプリングと見なされる部分的なセグメント損失を考案する。
論文 参考訳(メタデータ) (2020-07-03T10:32:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。