論文の概要: OAMatcher: An Overlapping Areas-based Network for Accurate Local Feature
Matching
- arxiv url: http://arxiv.org/abs/2302.05846v1
- Date: Sun, 12 Feb 2023 03:32:45 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-14 18:18:02.185972
- Title: OAMatcher: An Overlapping Areas-based Network for Accurate Local Feature
Matching
- Title(参考訳): OAMatcher: 正確な局所特徴マッチングのための重複エリアベースのネットワーク
- Authors: Kun Dai, Tao Xie, Ke Wang, Zhiqiang Jiang, Ruifeng Li, Lijun Zhao
- Abstract要約: OAMatcherは、人間の動作を模倣して、密集した正確な一致を生成する、検知不要な手法である。
OAMatcherは重複する領域を予測し、効果的でクリーンなグローバルコンテキストアグリゲーションを促進する。
総合的な実験により、OAMatcherはいくつかのベンチマークで最先端の手法より優れていることが示された。
- 参考スコア(独自算出の注目度): 9.006654114778073
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Local feature matching is an essential component in many visual applications.
In this work, we propose OAMatcher, a Tranformer-based detector-free method
that imitates humans behavior to generate dense and accurate matches. Firstly,
OAMatcher predicts overlapping areas to promote effective and clean global
context aggregation, with the key insight that humans focus on the overlapping
areas instead of the entire images after multiple observations when matching
keypoints in image pairs. Technically, we first perform global information
integration across all keypoints to imitate the humans behavior of observing
the entire images at the beginning of feature matching. Then, we propose
Overlapping Areas Prediction Module (OAPM) to capture the keypoints in
co-visible regions and conduct feature enhancement among them to simulate that
humans transit the focus regions from the entire images to overlapping regions,
hence realizeing effective information exchange without the interference coming
from the keypoints in non overlapping areas. Besides, since humans tend to
leverage probability to determine whether the match labels are correct or not,
we propose a Match Labels Weight Strategy (MLWS) to generate the coefficients
used to appraise the reliability of the ground-truth match labels, while
alleviating the influence of measurement noise coming from the data. Moreover,
we integrate depth-wise convolution into Tranformer encoder layers to ensure
OAMatcher extracts local and global feature representation concurrently.
Comprehensive experiments demonstrate that OAMatcher outperforms the
state-of-the-art methods on several benchmarks, while exhibiting excellent
robustness to extreme appearance variants. The source code is available at
https://github.com/DK-HU/OAMatcher.
- Abstract(参考訳): ローカルな特徴マッチングは多くのビジュアルアプリケーションにおいて重要なコンポーネントである。
本研究では,人間の行動を模倣して高密度で正確なマッチングを生成する,トランフォーマーベースの検出器フリーな手法であるoamatcherを提案する。
まず、OAMatcherは重なり合う領域を予測して、効果的でクリーンなグローバルなコンテキストアグリゲーションを促進する。
技術的には、まずすべてのキーポイントにまたがるグローバル情報統合を行い、特徴マッチングの開始時に画像全体を観察する人間の行動を模倣します。
そこで本研究では,共可視領域におけるキーポイントをキャプチャし,特徴拡張を行うオーバラップ領域予測モジュール(oapm)を提案し,画像全体からオーバラップ領域への焦点領域の移動をシミュレーションし,非重複領域におけるキーポイントからの干渉を伴わずに効果的な情報交換を実現する。
また、人間はマッチラベルが正しいかどうかを判断するために確率を利用する傾向があるため、データからの計測ノイズの影響を緩和しながら、接地ラベルの信頼性を評価するために使用される係数を生成するマッチラベル重み戦略(mlws)を提案する。
さらに,OAMatcherが局所的特徴表現とグローバル的特徴表現を同時に抽出することを保証するために,Tranformerエンコーダ層に奥行きの畳み込みを組み込む。
総合的な実験では、OAMatcherはいくつかのベンチマークで最先端の手法よりも優れており、極端な外観のバリエーションに対して優れた堅牢性を示している。
ソースコードはhttps://github.com/DK-HU/OAMatcherで入手できる。
関連論文リスト
- CorrMatch: Label Propagation via Correlation Matching for
Semi-Supervised Semantic Segmentation [73.89509052503222]
本稿では、CorrMatchと呼ばれる、単純だが実行可能な半教師付きセマンティックセマンティックセマンティックセマンティクス手法を提案する。
相関写像は、同一カテゴリのクラスタリングピクセルを容易に実現できるだけでなく、良好な形状情報も含んでいることを観察する。
我々は,高信頼画素を拡大し,さらに掘り出すために,画素の対の類似性をモデル化して画素伝搬を行う。
そして、相関地図から抽出した正確なクラス非依存マスクを用いて、領域伝搬を行い、擬似ラベルを強化する。
論文 参考訳(メタデータ) (2023-06-07T10:02:29Z) - High-fidelity Pseudo-labels for Boosting Weakly-Supervised Segmentation [17.804090651425955]
画像レベルの弱い教師付きセグメンテーション(WSSS)は、トレーニング中にセグメンテーションマスクを代理することで、通常膨大なデータアノテーションコストを削減する。
本研究は,GAPの代替となる重要サンプリングと特徴類似性損失という,CAMを改善するための2つの手法に基づく。
複数の独立二項問題の後部二項問題に基づいて両手法を再構成する。
パフォーマンスが向上し、より一般的なものになり、事実上あらゆるWSSSメソッドを増強できるアドオンメソッドが出来上がります。
論文 参考訳(メタデータ) (2023-04-05T17:43:57Z) - TransforMatcher: Match-to-Match Attention for Semantic Correspondence [48.25709192748133]
本稿では,視覚領域におけるトランスフォーマーネットワークの成功を基盤として,TransforMatcherと呼ばれる強力なセマンティック画像マッチング学習手法を提案する。
既存の畳み込みや注意に基づく対応スキームとは異なり、TransforMatcherは、正確なマッチングローカライゼーションとダイナミックリファインメントのために、グローバルなマッチングアテンションを実行する。
実験では、TransforMatcherはSPair-71k上の新しい状態を設定し、PF-PASCALデータセット上の既存のSOTAメソッドと同等に動作させる。
論文 参考訳(メタデータ) (2022-05-23T21:02:01Z) - Guide Local Feature Matching by Overlap Estimation [9.387323456222823]
OETRというTRansformerを用いた画像ペア上でのオーバーラップ推定手法を提案する。
OETRは、特徴相関の2段階のプロセスで重なり推定を行い、次いで重なり回帰を行う。
実験の結果,OETRは局所的特徴マッチング性能を大幅に向上させることができることがわかった。
論文 参考訳(メタデータ) (2022-02-18T07:11:36Z) - Reformulating HOI Detection as Adaptive Set Prediction [25.44630995307787]
我々は適応セット予測問題としてHOI検出を再構成する。
本稿では,並列インスタンスとインタラクションブランチを備えた適応型セットベースワンステージフレームワーク(as-net)を提案する。
この手法は、人間のポーズや言語的特徴を必要とせず、従来の最先端の手法を上回ります。
論文 参考訳(メタデータ) (2021-03-10T10:40:33Z) - Structure-Consistent Weakly Supervised Salient Object Detection with
Local Saliency Coherence [14.79639149658596]
本論文では,スクリブルアノテーションによる弱監督オブジェクト検出のための1ラウンドのエンドツーエンドトレーニング手法を提案する。
6つのベンチマークで最新のパフォーマンスを実現します。
論文 参考訳(メタデータ) (2020-12-08T12:49:40Z) - DIRV: Dense Interaction Region Voting for End-to-End Human-Object
Interaction Detection [53.40028068801092]
本稿では,HOI問題に対するインタラクション領域という新しい概念に基づいて,新しい一段階HOI検出手法を提案する。
従来の手法とは異なり,本手法は人-物対ごとに異なるスケールにわたる密集した相互作用領域に焦点をあてる。
単一相互作用領域の検出欠陥を補うために,我々は新しい投票戦略を導入する。
論文 参考訳(メタデータ) (2020-10-02T13:57:58Z) - Inter-Image Communication for Weakly Supervised Localization [77.2171924626778]
弱教師付きローカライゼーションは、画像レベルの監督のみを使用して対象対象領域を見つけることを目的としている。
我々は,より正確な物体位置を学習するために,異なる物体間の画素レベルの類似性を活用することを提案する。
ILSVRC検証セット上でトップ1のローカライズ誤差率45.17%を達成する。
論文 参考訳(メタデータ) (2020-08-12T04:14:11Z) - Cross-Domain Facial Expression Recognition: A Unified Evaluation
Benchmark and Adversarial Graph Learning [85.6386289476598]
我々は,クロスドメイン全体的特徴共適応のための新しい逆グラフ表現適応(AGRA)フレームワークを開発した。
我々は,いくつかの一般的なベンチマークで広範囲かつ公平な評価を行い,提案したAGRAフレームワークが従来の最先端手法よりも優れていることを示す。
論文 参考訳(メタデータ) (2020-08-03T15:00:31Z) - High-Order Information Matters: Learning Relation and Topology for
Occluded Person Re-Identification [84.43394420267794]
本稿では,高次関係とトポロジ情報を識別的特徴とロバストなアライメントのために学習し,新しい枠組みを提案する。
我々のフレームワークはOccluded-Dukeデータセットで最先端の6.5%mAPスコアを大幅に上回っている。
論文 参考訳(メタデータ) (2020-03-18T12:18:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。