論文の概要: Semantic Alignment in Hyperbolic Space for Open-Vocabulary Semantic Segmentation
- arxiv url: http://arxiv.org/abs/2605.08874v1
- Date: Sat, 09 May 2026 10:54:19 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-05-12 23:28:49.946279
- Title: Semantic Alignment in Hyperbolic Space for Open-Vocabulary Semantic Segmentation
- Title(参考訳): オープンボキャブラリ・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック・セマンティック
- Abstract要約: HyRoは、ポアンカレ球モデルにおける階層的および意味的なアライメントを分離する双曲的微調整フレームワークである。
標準的なオープン語彙セマンティックセグメンテーションベンチマークの実験は、HyRoが従来の手法よりも最先端のパフォーマンスを達成することを示した。
- 参考スコア(独自算出の注目度): 1.3154786509494614
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Open-vocabulary semantic segmentation requires adapting image-level vision-language models such as CLIP to dense pixel-level prediction, which is challenging due to the mismatch between hierarchical structure and semantic alignment in the embedding space. While recent works leverage hyperbolic geometry to model hierarchical relationships, they align embeddings across hierarchical levels but overlook semantic misalignment among embeddings within the same level. In this work, we propose HyRo, a hyperbolic fine-tuning framework that decouples hierarchical and semantic alignment in the Poincaré ball model. HyRo aligns hierarchical levels by adjusting the hyperbolic radius and refines semantic relationships through angular alignment using an orthogonal transformation that theoretically preserves the hyperbolic radius. Experiments on standard open-vocabulary semantic segmentation benchmarks demonstrate that HyRo achieves state-of-the-art performance over prior methods.
- Abstract(参考訳): オープンボキャブラリセマンティックセグメンテーションでは、CLIPのような画像レベルの視覚言語モデルを、階層構造と埋め込み空間におけるセマンティックアライメントのミスマッチのため、高密度ピクセルレベルの予測に適応する必要がある。
最近の研究は双曲幾何学を利用して階層関係をモデル化しているが、それらは階層的なレベルにまたがって埋め込みを整列するが、同じレベルに埋め込まれた埋め込みのセマンティックなミスアライメントを見落としている。
本研究では,ポアンカレ球モデルにおける階層的および意味的アライメントを分離する双曲的微調整フレームワークであるHyRoを提案する。
HyRoは双曲半径を調整することで階層レベルを整列し、双曲半径を理論的に保存する直交変換を用いて角アライメントを通して意味関係を洗練する。
標準的なオープン語彙セマンティックセグメンテーションベンチマークの実験は、HyRoが従来の手法よりも最先端のパフォーマンスを達成することを示した。
関連論文リスト
- Text-Driven Fusion for Infrared and Visible Images: Achieving Image Scene Adaptation on Hyperbolic Space [63.220767051340005]
赤外線と可視画像の融合は相補的なモダリティを統合することを目的としている。
双曲的多様体学習によるテキスト駆動型融合フレームワークを提案する。
実験の結果,提案手法はベンチマークデータセットの最先端手法よりも優れていた。
論文 参考訳(メタデータ) (2026-06-13T04:33:33Z) - LAST: Bridging Vision-Language and Action Manifolds via Gromov-Wasserstein Alignment [71.3712075841632]
LASTはアクション空間を再構築し、ビジョン・ランゲージ・アクション・モダリティとの局所的な距離互換性を確立する。
LASTは収束性と一般化性に優れたVLAモデルを可能にする。
論文 参考訳(メタデータ) (2026-05-27T03:48:10Z) - Hyperbolic Enhanced Representation Learning for Incomplete Multi-view Clustering [57.38215918201251]
本稿では,不完全なマルチビュークラスタリングのためのハイパーボリック拡張表現学習フレームワークであるHERLを提案する。
ポアンカレボール内で操作すると、HERLは表現学習を強化するために構造を意識した潜在空間を構築する。
HERLは最先端のアプローチよりも一貫して優れていることを示す。
論文 参考訳(メタデータ) (2026-04-18T10:50:46Z) - A Hyperbolic Perspective on Hierarchical Structure in Object-Centric Scene Representations [58.143688187023734]
双曲空間のローレンツ双曲体にユークリッドスロット埋め込みを投影する簡単なパイプラインを提案する。
スロットアテンションマスクから直接5段階の視覚階層を構築する。
双曲的プロジェクションは、一貫したシーンレベルをオブジェクトレベル組織に公開する。
論文 参考訳(メタデータ) (2026-03-14T16:53:59Z) - HyperAlign: Hyperbolic Entailment Cones for Adaptive Text-to-Image Alignment Assessment [84.65251073657883]
双曲的エンターメント幾何に基づく適応型テキスト・画像アライメントアライメントアセスメントフレームワークHyperAlignを提案する。
まず、CLIPを用いてユークリッド特徴を抽出し、双曲空間にマッピングする。
第二に、離散エンターメント論理を連続的な幾何学的構造管理に変換する動的スーパービジョンエンターメントモデリング機構を設計する。
第3に,双曲幾何学的特徴を利用してサンプルレベルの変調パラメータを生成する適応変調回帰器を提案する。
論文 参考訳(メタデータ) (2026-01-08T05:41:06Z) - Modality Alignment across Trees on Heterogeneous Hyperbolic Manifolds [49.95082206008502]
ツリーを横断するアライメントは、画像とテキストのモダリティの両方に対してツリーのような階層的な特徴を構築し、調整する手法である。
本稿では,中間トランスフォーマー層からの視覚的クラストークンにクロスアテンション機構を適用した意味認識型視覚特徴抽出フレームワークを提案する。
論文 参考訳(メタデータ) (2025-10-31T11:32:15Z) - Dense Semantic Matching with VGGT Prior [49.42199006453071]
本稿では,VGGTの本質的な強みを,初期の特徴段階を再利用し,後続の特徴段階を微調整し,双方向対応のための意味的頭部を追加することによって維持するアプローチを提案する。
提案手法は, 従来のベースラインよりも優れた幾何認識, 整合性, および多様体保存を実現する。
論文 参考訳(メタデータ) (2025-09-25T14:56:11Z) - A Set-to-Set Distance Measure in Hyperbolic Space [50.134086375286074]
双曲空間における集合間の相似性を計算するための双曲的集合間距離測度を提案する。
位相的差を考慮すると、HS2SDは2つの双曲集合の間の関係をより微妙に理解する。
論文 参考訳(メタデータ) (2025-06-23T11:31:40Z) - HyperPath: Knowledge-Guided Hyperbolic Semantic Hierarchy Modeling for WSI Analysis [21.380034877048644]
双曲空間における意味階層のモデル化を導くために,テキスト記述から知識を統合する新しい手法であるHyperPathを提案する。
本手法は,病理視覚言語基盤モデルから抽出した視覚的特徴とテキスト的特徴を双曲空間に適用する。
提案手法は,WSI解析におけるハイパーボリック埋め込みの可能性を強調し,既存の手法と比較してタスク間での優れた性能を実現する。
論文 参考訳(メタデータ) (2025-06-19T15:30:33Z) - From Semantics to Hierarchy: A Hybrid Euclidean-Tangent-Hyperbolic Space Model for Temporal Knowledge Graph Reasoning [1.1372536310854844]
時間的知識グラフ(TKG)推論は、過去のデータに基づいて将来の出来事を予測する。
既存のユークリッドモデルはセマンティクスを捉えるのに優れているが、階層構造に苦しむ。
ユークリッドモデルと双曲モデルの両方の強みを利用する新しいハイブリッド幾何空間アプローチを提案する。
論文 参考訳(メタデータ) (2024-08-30T10:33:08Z) - Hyperbolic Hierarchical Knowledge Graph Embeddings for Link Prediction
in Low Dimensions [11.260501547769636]
我々は、$textbfHyp$erbolic $textbfH$ierarchical $textbfKGE$ (HypHKGE)と呼ばれる新しいKGEモデルを提案する。
このモデルは、双曲空間に対する注意に基づく学習可能な曲率を導入し、リッチなセマンティック階層を保存するのに役立つ。
3つのベンチマークデータセットに対するHypHKGEモデルの有効性を示す実験を行った。
論文 参考訳(メタデータ) (2022-04-28T03:41:41Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。