論文の概要: Escaping Data Scarcity for High-Resolution Heterogeneous Face
Hallucination
- arxiv url: http://arxiv.org/abs/2203.16669v1
- Date: Wed, 30 Mar 2022 20:44:33 GMT
- ステータス: 処理完了
- システム内更新日: 2022-04-01 15:07:12.639862
- Title: Escaping Data Scarcity for High-Resolution Heterogeneous Face
Hallucination
- Title(参考訳): 高分解能不均一顔幻覚のためのデータ共有化
- Authors: Yiqun Mei, Pengfei Guo, Vishal M. Patel
- Abstract要約: Heterogeneous Face Recognition (HFR) では、視覚や熱といった2つの異なる領域にまたがる顔のマッチングが目的である。
合成によるギャップを埋めようとする最近の手法は有望な結果を得たが、ペアトレーニングデータの不足により、その性能は依然として制限されている。
本稿では,HFRのための新しい顔幻覚パラダイムを提案する。これはデータ効率のよい合成を可能にするだけでなく,プライバシポリシーを破ることなくモデルトレーニングのスケールアップを可能にする。
- 参考スコア(独自算出の注目度): 68.78903256687697
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In Heterogeneous Face Recognition (HFR), the objective is to match faces
across two different domains such as visible and thermal. Large domain
discrepancy makes HFR a difficult problem. Recent methods attempting to fill
the gap via synthesis have achieved promising results, but their performance is
still limited by the scarcity of paired training data. In practice, large-scale
heterogeneous face data are often inaccessible due to the high cost of
acquisition and annotation process as well as privacy regulations. In this
paper, we propose a new face hallucination paradigm for HFR, which not only
enables data-efficient synthesis but also allows to scale up model training
without breaking any privacy policy. Unlike existing methods that learn face
synthesis entirely from scratch, our approach is particularly designed to take
advantage of rich and diverse facial priors from visible domain for more
faithful hallucination. On the other hand, large-scale training is enabled by
introducing a new federated learning scheme to allow institution-wise
collaborations while avoiding explicit data sharing. Extensive experiments
demonstrate the advantages of our approach in tackling HFR under current data
limitations. In a unified framework, our method yields the state-of-the-art
hallucination results on multiple HFR datasets.
- Abstract(参考訳): Heterogeneous Face Recognition (HFR) では、視覚や熱といった2つの異なる領域にまたがる顔のマッチングが目的である。
大きなドメインの不一致はhfrを難しい問題にする。
合成によるギャップを埋めようとする最近の手法は有望な結果を得たが、ペアトレーニングデータの不足によって性能は依然として制限されている。
実際には、大規模な異種顔データは、高コストの取得およびアノテーションプロセスとプライバシー規制のためにアクセスできないことが多い。
本稿では,データ効率の良い合成を可能にするだけでなく,プライバシポリシを破ることなくモデルトレーニングをスケールアップできるhfrの新しい顔幻覚パラダイムを提案する。
顔合成を完全にスクラッチから学ぶ既存の手法とは異なり、我々のアプローチは、より忠実な幻覚のために、可視領域からリッチで多様な顔前処理を利用するように特別に設計されている。
一方, 大規模学習は, 明示的なデータ共有を回避しつつ, 機関的な連携を可能にする新しい連携学習方式を導入することで実現されている。
大規模な実験は、現在のデータ制限の下でHFRに取り組む際の我々のアプローチの利点を実証する。
統合されたフレームワークでは,複数のHFRデータセットに対する最先端の幻覚結果が得られる。
関連論文リスト
- Towards Data-Centric Face Anti-Spoofing: Improving Cross-domain Generalization via Physics-based Data Synthesis [64.46312434121455]
Face Anti-Spoofing (FAS) 研究は、トレーニングデータとテストデータの間にドメインギャップがあるクロスドメイン問題によって難題となっている。
本研究では,タスク固有のFASデータ拡張(FAS-Aug)を提案する。
また,特定の種類のアーティファクトをモデルが依存しないようにし,一般化性能を向上させるために,SARE(Spowing Attack Risk Equalization)を提案する。
論文 参考訳(メタデータ) (2024-09-04T01:45:18Z) - Heterogeneous Face Recognition Using Domain Invariant Units [4.910937238451485]
教師ネットワークとして事前訓練された顔認識モデルを用いてドメイン不変ネットワーク層(DIU)を学習する。
提案したDIUは、対照的な蒸留フレームワークを用いて、限られた量のペアトレーニングデータでも効果的に訓練することができる。
提案手法は、事前訓練されたモデルを強化する可能性があり、より広い範囲のデータに適応できる。
論文 参考訳(メタデータ) (2024-04-22T16:58:37Z) - Generalized Face Liveness Detection via De-spoofing Face Generator [58.7043386978171]
以前のFace Anti-Spoofing (FAS) の作業は、目に見えない領域における一般化という課題に直面している。
De-spoofing Face Generator (DFG) によるモデル一般化を改善するために, 現実の顔を利用する Anomalous cue Guided FAS (AG-FAS) 方式を実行する。
次に,Anomalous cue Guided FAS feature extract Network (AG-Net)を提案する。
論文 参考訳(メタデータ) (2024-01-17T06:59:32Z) - Rethinking the Domain Gap in Near-infrared Face Recognition [65.7871950460781]
不均一顔認識(HFR)は、視覚領域(VIS)と近赤外領域(NIR)にまたがる複雑な顔画像マッチング作業を伴う。
HFRに関する既存の文献の多くは、ドメインギャップを主要な課題と認識し、それを入力レベルまたは機能レベルでブリッジする取り組みを指示している。
大規模同質なVISデータで事前トレーニングを行った場合、大規模ニューラルネットワークはより小さなニューラルネットワークとは異なり、HFRでは例外的なゼロショット性能を示す。
論文 参考訳(メタデータ) (2023-12-01T14:43:28Z) - SASMU: boost the performance of generalized recognition model using
synthetic face dataset [5.596292759115785]
本稿では,合成データセットを用いた顔認識のための,シンプルで斬新で効果的な手法であるSASMUを提案する。
提案手法は空間データ拡張(SA)とスペクトル混合(SMU)からなる。
論文 参考訳(メタデータ) (2023-06-02T11:11:00Z) - Cluster-level pseudo-labelling for source-free cross-domain facial
expression recognition [94.56304526014875]
表情認識のためのSFUDA法を提案する。
本手法は,自己教師付き事前学習を利用して,対象データから優れた特徴表現を学習する。
提案手法の有効性を4つの適応方式で検証し,FERに適用した場合,既存のSFUDA法より一貫して優れていることを示す。
論文 参考訳(メタデータ) (2022-10-11T08:24:50Z) - Heterogeneous Face Recognition via Face Synthesis with
Identity-Attribute Disentanglement [33.42679052386639]
Heterogeneous Face Recognition (HFR)は、異なるドメインの顔にマッチすることを目的としている。
FSIAD (Face Synthesis with Identity-Attribute Disentanglement) という新しいHFR手法を提案する。
FSIADは顔画像をアイデンティティ関連表現とアイデンティティ非関連表現(属性と呼ばれる)に分離する
論文 参考訳(メタデータ) (2022-06-10T03:01:33Z) - Relational Deep Feature Learning for Heterogeneous Face Recognition [17.494718795454055]
一般的な顔の特徴に加えて,グローバルな関係情報を抽出するグラフモジュール (Graph Module, NIR) を提案する。
提案手法は,5つの異種顔認識(HFR)データベースにおいて,他の最先端手法よりも優れている。
論文 参考訳(メタデータ) (2020-03-02T07:35:23Z) - Joint Deep Learning of Facial Expression Synthesis and Recognition [97.19528464266824]
顔表情の合成と認識を効果的に行うための新しい統合深層学習法を提案する。
提案手法は, 2段階の学習手順を伴い, まず, 表情の異なる顔画像を生成するために, 表情合成生成対向ネットワーク (FESGAN) を事前訓練する。
実画像と合成画像間のデータバイアスの問題を軽減するために,新しい実データ誘導バックプロパゲーション(RDBP)アルゴリズムを用いたクラス内損失を提案する。
論文 参考訳(メタデータ) (2020-02-06T10:56:00Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。