論文の概要: A Similarity Inference Metric for RGB-Infrared Cross-Modality Person
Re-identification
- arxiv url: http://arxiv.org/abs/2007.01504v1
- Date: Fri, 3 Jul 2020 05:28:13 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-14 05:39:42.438937
- Title: A Similarity Inference Metric for RGB-Infrared Cross-Modality Person
Re-identification
- Title(参考訳): RGB-赤外クロスモダリティ人物再識別のための類似度推定基準
- Authors: Mengxi Jia, Yunpeng Zhai, Shijian Lu, Siwei Ma, Jian Zhang
- Abstract要約: IRとRGBの相違が大きいため、モダリティの人物再識別(re-ID)は難しい課題である。
既存のメソッドはこの課題に対処するため、典型的には、特徴分布やイメージスタイルをモダリティ間で整列させることで対処する。
本稿では,モダリティ内サンプルの類似性を利用して,モダリティ間の相違を回避する新しい類似度推定指標(SIM)を提案する。
- 参考スコア(独自算出の注目度): 66.49212581685127
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: RGB-Infrared (IR) cross-modality person re-identification (re-ID), which aims
to search an IR image in RGB gallery or vice versa, is a challenging task due
to the large discrepancy between IR and RGB modalities. Existing methods
address this challenge typically by aligning feature distributions or image
styles across modalities, whereas the very useful similarities among gallery
samples of the same modality (i.e. intra-modality sample similarities) is
largely neglected. This paper presents a novel similarity inference metric
(SIM) that exploits the intra-modality sample similarities to circumvent the
cross-modality discrepancy targeting optimal cross-modality image matching. SIM
works by successive similarity graph reasoning and mutual nearest-neighbor
reasoning that mine cross-modality sample similarities by leveraging
intra-modality sample similarities from two different perspectives. Extensive
experiments over two cross-modality re-ID datasets (SYSU-MM01 and RegDB) show
that SIM achieves significant accuracy improvement but with little extra
training as compared with the state-of-the-art.
- Abstract(参考訳): RGBギャラリーでIR画像を検索することを目的としたRGB-赤外線(IR)のクロスモダリティ人物再識別(re-ID)は、IRとRGBのモダリティの相違が大きいため、難しい課題である。
既存の手法では、典型的には特徴分布やイメージスタイルをモダリティにわたって整列させることによってこの問題に対処するが、同じモダリティのギャラリーサンプル(すなわちモダリティ内サンプル類似性)の非常に有用な類似性は無視されている。
本稿では,最適なクロスモダリティ画像マッチングを目標としたクロスモダリティ不一致を回避するために,モダリティ内サンプル類似性を利用した新しい類似度推論メトリック(sim)を提案する。
simは連続する類似性グラフの推論と相互最寄りの推論によって動作し、2つの異なる視点からモダリティ内サンプルの類似性を活用し、モダリティ間のサンプルの類似性をマイニングする。
2つのクロスモーダルre-IDデータセット(SYSU-MM01とRegDB)に対する大規模な実験により、SIMは精度が大幅に向上するが、最先端技術と比較すると、追加のトレーニングは少ないことが示されている。
関連論文リスト
- Cross-Modality Perturbation Synergy Attack for Person Re-identification [66.48494594909123]
相互モダリティReIDの主な課題は、異なるモダリティ間の視覚的差異を効果的に扱うことである。
既存の攻撃方法は、目に見える画像のモダリティの特徴に主に焦点を当てている。
本研究では,クロスモーダルReIDに特化して設計されたユニバーサル摂動攻撃を提案する。
論文 参考訳(メタデータ) (2024-01-18T15:56:23Z) - Exploring Invariant Representation for Visible-Infrared Person
Re-Identification [77.06940947765406]
異なるスペクトルを横断する歩行者にアイデンティティを関連付けることを目的とした、クロススペクトルの人物再識別は、モダリティの相違の主な課題に直面している。
本稿では、ロバスト機能マイニングネットワーク(RFM)と呼ばれるエンドツーエンドのハイブリッド学習フレームワークにおいて、画像レベルと特徴レベルの両方の問題に対処する。
RegDBとSYSU-MM01という2つの標準的なクロススペクトル人物識別データセットの実験結果により,最先端の性能が示された。
論文 参考訳(メタデータ) (2023-02-02T05:24:50Z) - Unsupervised Misaligned Infrared and Visible Image Fusion via
Cross-Modality Image Generation and Registration [59.02821429555375]
我々は、教師なし不整合赤外線と可視画像融合のための頑健な相互モダリティ生成登録パラダイムを提案する。
登録された赤外線画像と可視画像とを融合させるため,IFM (Feature Interaction Fusion Module) を提案する。
論文 参考訳(メタデータ) (2022-05-24T07:51:57Z) - Modality-Adaptive Mixup and Invariant Decomposition for RGB-Infrared
Person Re-Identification [84.32086702849338]
RGB-赤外線人物再同定のための新しいモダリティ適応混合・不変分解(MID)手法を提案する。
MIDは、RGBと赤外線画像の混合画像を生成するためのモダリティ適応混合方式を設計する。
2つの挑戦的なベンチマーク実験は、最先端の手法よりもMIDの優れた性能を示す。
論文 参考訳(メタデータ) (2022-03-03T14:26:49Z) - A Novel Self-Supervised Cross-Modal Image Retrieval Method In Remote
Sensing [0.0]
クロスモーダルRS画像検索手法は、異なるモーダルにわたって意味論的に類似した画像を検索する。
既存のCM-RSIR法では、注釈付きトレーニング画像が必要であり、モーダル内およびモーダル間類似性保存とモーダル間差分除去を同時に処理しない。
本稿では,異なるモダリティ間の相互情報を自己教師型でモデル化することを目的とした,新たな自己教師型クロスモーダル画像検索手法を提案する。
論文 参考訳(メタデータ) (2022-02-23T11:20:24Z) - Multi-Scale Cascading Network with Compact Feature Learning for
RGB-Infrared Person Re-Identification [35.55895776505113]
マルチスケールパートアウェアカスケードフレームワーク(MSPAC)は、マルチスケールの細かい機能を部分からグローバルに集約することによって策定されます。
したがって、クロスモダリティ相関は、特徴的モダリティ不変な特徴学習のための顕著な特徴を効率的に探索することができる。
論文 参考訳(メタデータ) (2020-12-12T15:39:11Z) - Cross-Spectral Periocular Recognition with Conditional Adversarial
Networks [59.17685450892182]
本研究では,近赤外・近赤外スペクトル間の近赤外画像の変換を訓練した条件付き生成逆相関ネットワークを提案する。
EER=1%, GAR>99% @ FAR=1%, ポリUデータベースの最先端技術に匹敵するスペクトル近視性能を得た。
論文 参考訳(メタデータ) (2020-08-26T15:02:04Z) - Cross-Spectrum Dual-Subspace Pairing for RGB-infrared Cross-Modality
Person Re-Identification [15.475897856494583]
従来の人物識別はRGBカラー画像しか扱えないが、暗い条件下では失敗する。
RGB赤外線ReID(Infrared-Visible ReID、Visible-Thermal ReIDとも呼ばれる)が提案されている。
本稿では, 新たなマルチスペクトル画像生成手法を提案し, 生成したサンプルを用いて, ネットワークの識別情報検索を支援する。
論文 参考訳(メタデータ) (2020-02-29T09:01:39Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。