論文の概要: CauseCollab: Causal Unified and Modality-Agnostic Network for Heterogeneous Collaborative Perception
- arxiv url: http://arxiv.org/abs/2609.03818v1
- Date: Thu, 03 Sep 2026 13:19:50 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-04 18:28:39.085665
- Title: CauseCollab: Causal Unified and Modality-Agnostic Network for Heterogeneous Collaborative Perception
- Title(参考訳): causeCollab:異種協調知覚のための因果統一とモダリティ非依存ネットワーク
- Abstract要約: 協調的知覚は、マルチエージェント情報共有による環境理解を促進する。
最近のプロトコルベースの2段階法では、不均一な特徴を共有プロトコル空間にマッピングすることでこの問題を緩和している。
本稿では因果統合・モダリティに依存しないネットワークであるCouchCollabを提案する。
- 参考スコア(独自算出の注目度): 16.26142526400162
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Collaborative perception enhances environment understanding through multi-agent information sharing, but its performance in real-world scenarios is constrained by heterogeneous sensor modalities and model architectures. Recent protocol-based two-stage methods alleviate this problem by mapping heterogeneous features into a shared protocol space; however, independently trained modality-specific converters often generate modality-specific pseudo-protocol distributions, leading to semantic inconsistency and error accumulation, which is particularly pronounced in scenarios with large modality discrepancies. To address this issue, we propose CauseCollab, a causal unified and modality-agnostic network. CauseCollab formulates representation learning in the protocol space from a causal perspective, explicitly disentangling semantic factors from modality-specific statistical confounders via causal metric learning. Meanwhile, CauseCollab adopts context-guided Unified Converter for heterogeneous modalities to ensure cross-modal semantic consistency. In addition, integrating new modalities only requires training adapters with minimal parameters. Extensive experiments on the OPV2V and DAIR-V2X datasets demonstrate that CauseCollab achieves state-of-the-art performance, with more significant gains in scenarios involving large modality gaps.
- Abstract(参考訳): 協調認識は、マルチエージェント情報共有による環境理解を促進するが、実世界のシナリオにおけるその性能は、異種センサモーダル性やモデルアーキテクチャによって制約される。
最近のプロトコルベースの2段階法では、異質な特徴を共有プロトコル空間にマッピングすることでこの問題を軽減するが、独立に訓練されたモダリティ固有のコンバータは、しばしばモダリティ固有の擬似プロトコール分布を生成し、意味的不整合とエラーの蓄積をもたらす。
この問題に対処するために,因果的に統一されたモダリティに依存しないネットワークであるCouchCollabを提案する。
causeCollabは、因果的観点からプロトコル空間における表現学習を定式化し、因果的メートル法学習を通じて、モダリティ固有の統計的共同設立者から意味的要因を明示的に分離する。
一方、Co causedCollabはコンテキスト誘導統一コンバータを異種モーダルに採用し、モーダル間のセマンティック一貫性を確保する。
さらに、新しいモダリティを統合するには、最小限のパラメータを持つアダプタをトレーニングする必要がある。
OPV2VとDAIR-V2Xデータセットの大規模な実験は、Co causedCollabが最先端のパフォーマンスを達成することを示した。
関連論文リスト
- CoDS: Robust Collaborative Perception via Expert-driven Detection and BEV Segmentation [13.629082376442405]
協調的知覚は、マルチエージェント情報交換による単一視点の制限を突破する。
しかし、ポーズエラーや通信遅延などのマルチソースノイズは融合特性の品質を低下させる。
エキスパート駆動型検出とベブ(CoDS)を用いたロバストな協調認識フレームワークを提案する。
論文 参考訳(メタデータ) (2026-08-14T08:47:28Z) - Unleashing Multimodal Large Language Models for Training-free HOI Detection in the Wild [49.77540427384148]
本稿では,基礎モデルの汎用的マルチモーダル推論能力を野生でのHOI検出に伝達する,訓練不要なエージェント型フレームワークであるAgenHoIを提案する。
不完全な相互作用発見と複雑な場面におけるあいまいな局所化の課題に対処するために,2つの重要なメカニズムを導入する。
AgentHOIは、リアルタイム設定において、最先端の教師付きおよび弱教師付きメソッドよりも優れたパフォーマンスを実現する。
論文 参考訳(メタデータ) (2026-07-15T14:30:20Z) - Prototype-Anchored Generalized Manifold Regression for Unknown-Domain Object Detection [58.25418970608328]
単一ソースドメイン上でトレーニングされた検出器を複数の未確認領域に転送することを目的としたシングルドメイン一般化オブジェクト検出(Single-DGOD)について検討する。
既存の手法は主に、トレーニング分布を拡大するために、データ拡張やテキストプロンプトといったシミュレーション駆動の戦略に依存している。
本稿では, 未知領域の一般化を多様体回帰問題として定式化する, Visual-Text Dual Chain-of-Thought (MR-DCoT) を用いたマニフォールド回帰を提案する。
論文 参考訳(メタデータ) (2026-07-08T09:27:15Z) - Group Cognition Learning: Making Everything Better Through Governed Two-Stage Agents Collaboration [13.299987551113809]
グループ認知学習(グループ認知学習、Group Cognition Learning、GCL)は、モダリティ固有の符号化の後に2段階のプロトコルを適用する、管理された協調パラダイムである。
GCLはモダリティの優位性と結合を緩和し、回帰ベンチマークと分類ベンチマークの両方で最先端の結果を確立する。
論文 参考訳(メタデータ) (2026-05-01T03:19:34Z) - Learning Invariant Modality Representation for Robust Multimodal Learning from a Causal Inference Perspective [6.3310165899037045]
頑健なマルチモーダル学習のための因果的モダリティ不変表現(CmIR)学習フレームワークを提案する。
CmIRは学習した不変表現が、異なる環境におけるラベルとの安定した予測関係を維持することを保証している。
CmIRはアウト・オブ・ディストリビューションデータとノイズデータに優れ、その堅牢性と一般化性を確認する。
論文 参考訳(メタデータ) (2026-04-20T16:16:36Z) - Toward Stable Semi-Supervised Remote Sensing Segmentation via Co-Guidance and Co-Fusion [31.189038928192648]
Co2Sは半教師付きRSセグメンテーションフレームワークで、ビジョン言語モデルと自己教師型モデルとを融合する。
テキスト埋め込みと学習可能なクエリを利用した,明示的でシンプルなセマンティックコガイダンス機構が導入された。
6つの一般的なデータセットに対する実験は,提案手法の優位性を実証している。
論文 参考訳(メタデータ) (2025-12-28T18:24:19Z) - Unified modality separation: A vision-language framework for unsupervised domain adaptation [60.8391821117794]
教師なしドメイン適応(Unsupervised domain adapt, UDA)は、ラベル付きソースドメインでトレーニングされたモデルが新しいラベル付きドメインを扱うことを可能にする。
本稿では,モダリティ固有成分とモダリティ不変成分の両方に対応可能な統一モダリティ分離フレームワークを提案する。
提案手法は,9倍の計算効率で最大9%の性能向上を実現している。
論文 参考訳(メタデータ) (2025-08-07T02:51:10Z) - Bridging the inference gap in Mutimodal Variational Autoencoders [6.246098300155483]
マルチモーダル変分オートエンコーダは、観測されたモダリティから観測されていないモダリティを生成するための多目的でスケーラブルな方法を提供する。
エキスパートの混合集合を用いた最近のモデルは、複雑なデータセットにおける生成品質を制限する理論的に基礎的な制限に悩まされている。
本稿では,混合アグリゲーションを導入することなく,結合分布と条件分布の両方を学習できる新しい解釈可能なモデルを提案する。
論文 参考訳(メタデータ) (2025-02-06T10:43:55Z) - Generalizable Heterogeneous Federated Cross-Correlation and Instance
Similarity Learning [60.058083574671834]
本稿では,新しいFCCL+,フェデレーション相関と非ターゲット蒸留との類似性学習を提案する。
不均一な問題に対しては、無関係な公開データを通信に活用する。
局所的な更新段階における破滅的な忘れ物として、FCCL+はFederated Non Target Distillationを導入している。
論文 参考訳(メタデータ) (2023-09-28T09:32:27Z) - Exploiting modality-invariant feature for robust multimodal emotion
recognition with missing modalities [76.08541852988536]
我々は、欠落したモダリティ・イマジネーション・ネットワーク(IF-MMIN)に不変な特徴を用いることを提案する。
提案モデルは,不確実なモダリティ条件下で,すべてのベースラインを上回り,全体の感情認識性能を不変に向上することを示す。
論文 参考訳(メタデータ) (2022-10-27T12:16:25Z) - Invariant Causal Prediction for Block MDPs [106.63346115341862]
環境全体にわたる一般化は、実世界の課題への強化学習アルゴリズムの適用の成功に不可欠である。
本稿では,多環境環境における新しい観測を一般化するモデル不適合状態抽象化(MISA)を学習するための不変予測法を提案する。
論文 参考訳(メタデータ) (2020-03-12T21:03:01Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。