論文の概要: Learning Fair Face Representation With Progressive Cross Transformer
- arxiv url: http://arxiv.org/abs/2108.04983v1
- Date: Wed, 11 Aug 2021 01:31:14 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-12 13:33:06.019349
- Title: Learning Fair Face Representation With Progressive Cross Transformer
- Title(参考訳): プログレッシブクロストランスフォーマーによるフェアフェイス表現の学習
- Authors: Yong Li, Yufei Sun, Zhen Cui, Shiguang Shan, Jian Yang
- Abstract要約: フェアフェイス認識のためのプログレッシブクロストランス (PCT) 手法を提案する。
我々は,PCTが最先端FR性能を達成しつつ,顔認識におけるバイアスを軽減することができることを示した。
- 参考スコア(独自算出の注目度): 79.73754444296213
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Face recognition (FR) has made extraordinary progress owing to the
advancement of deep convolutional neural networks. However, demographic bias
among different racial cohorts still challenges the practical face recognition
system. The race factor has been proven to be a dilemma for fair FR (FFR) as
the subject-related specific attributes induce the classification bias whilst
carrying some useful cues for FR. To mitigate racial bias and meantime preserve
robust FR, we abstract face identity-related representation as a signal
denoising problem and propose a progressive cross transformer (PCT) method for
fair face recognition. Originating from the signal decomposition theory, we
attempt to decouple face representation into i) identity-related components and
ii) noisy/identity-unrelated components induced by race. As an extension of
signal subspace decomposition, we formulate face decoupling as a generalized
functional expression model to cross-predict face identity and race
information. The face expression model is further concretized by designing dual
cross-transformers to distill identity-related components and suppress racial
noises. In order to refine face representation, we take a progressive face
decoupling way to learn identity/race-specific transformations, so that
identity-unrelated components induced by race could be better disentangled. We
evaluate the proposed PCT on the public fair face recognition benchmarks (BFW,
RFW) and verify that PCT is capable of mitigating bias in face recognition
while achieving state-of-the-art FR performance. Besides, visualization results
also show that the attention maps in PCT can well reveal the
race-related/biased facial regions.
- Abstract(参考訳): 深層畳み込みニューラルネットワークの進歩により、顔認識(fr)は驚くべき進歩を遂げている。
しかし、異なる人種のコホート間の人口バイアスは、まだ実用的な顔認識システムに挑戦している。
レース因子はfair fr(ffr)のジレンマであることが証明されており、対象に固有の属性がfrに有用な手がかりを持ちながら分類バイアスを誘導する。
人種的バイアスを軽減し、一方的にロバストなfrを保持するために、顔識別関連表現を信号雑音化問題として抽象化し、公正な顔認識のためのプログレッシブクロストランス(pct)法を提案する。
信号分解理論を起源として, 顔表現をi) 識別関連成分とi) 人種によって誘導される雑音/同一性非関連成分に分離しようとする。
信号部分空間分解の拡張として,一般化された関数式モデルとしてフェースデカップリングを定式化する。
顔表現モデルは、アイデンティティ関連成分を蒸留し、人種的ノイズを抑制するデュアルクロストランスフォーマを設計することでさらに具体化されている。
顔表現を洗練するために、私たちはアイデンティティ/人種固有のトランスフォーメーションを学ぶためのプログレッシブ・フェイス・デカップリング(progressive face decoupling)の方法を取る。
提案したPCTをパブリックフェア顔認識ベンチマーク(BFW, RFW)で評価し, 最先端FR性能を達成しつつ, 顔認識におけるバイアスを軽減できることを確認した。
さらに,PCTの注意マップでは,人種関連・偏りのある顔領域がよく示される。
関連論文リスト
- ID$^3$: Identity-Preserving-yet-Diversified Diffusion Models for Synthetic Face Recognition [60.15830516741776]
合成顔認識(SFR)は、実際の顔データの分布を模倣するデータセットを生成することを目的としている。
拡散燃料SFRモデルであるtextID3$を紹介します。
textID3$はID保存損失を利用して、多様だがアイデンティティに一貫性のある顔の外観を生成する。
論文 参考訳(メタデータ) (2024-09-26T06:46:40Z) - Text-Guided Face Recognition using Multi-Granularity Cross-Modal
Contrastive Learning [0.0]
テキスト誘導顔認識(TGFR)を導入し、自然言語記述の形で顔属性を統合することの影響を解析する。
TGFRは、特に低画質の画像において、既存の顔認識モデルよりも顕著に改善されている。
論文 参考訳(メタデータ) (2023-12-14T22:04:22Z) - Emotion Separation and Recognition from a Facial Expression by Generating the Poker Face with Vision Transformers [57.1091606948826]
我々はこれらの課題に対処するため,ポーカー・フェイス・ビジョン・トランスフォーマー (PF-ViT) と呼ばれる新しいFERモデルを提案する。
PF-ViTは、対応するポーカーフェースを生成して、乱れを認識できない感情を静的な顔画像から分離し、認識することを目的としている。
PF-ViTはバニラビジョントランスフォーマーを使用し、そのコンポーネントは大規模な表情データセット上でMasked Autoencodeerとして事前トレーニングされている。
論文 参考訳(メタデータ) (2022-07-22T13:39:06Z) - Heterogeneous Visible-Thermal and Visible-Infrared Face Recognition
using Unit-Class Loss and Cross-Modality Discriminator [0.43748379918040853]
本稿では,クロスモーダル顔認識のためのエンドツーエンドフレームワークを提案する。
モダリティ情報を捨てつつアイデンティティ情報を保存するために,新しい単位クラス損失を提案する。
提案したネットワークは、モダリティ非依存のベクトル表現を抽出したり、テスト画像のマッチングペア分類に利用できる。
論文 参考訳(メタデータ) (2021-11-29T06:14:00Z) - Learning Facial Representations from the Cycle-consistency of Face [23.23272327438177]
顔特徴の周期一貫性を自由監督信号として導入し、ラベルのない顔画像から顔の表情を学習する。
この学習は、顔の動きサイクルの制約とアイデンティティのサイクルの制約を重畳することによって実現される。
我々のアプローチは既存の手法と競合し、アンタングル表現に埋め込まれたリッチでユニークな情報を実証する。
論文 参考訳(メタデータ) (2021-08-07T11:30:35Z) - Mitigating Face Recognition Bias via Group Adaptive Classifier [53.15616844833305]
この研究は、全てのグループの顔がより平等に表現できる公正な顔表現を学ぶことを目的としている。
我々の研究は、競争精度を維持しながら、人口集団間での顔認識バイアスを軽減することができる。
論文 参考訳(メタデータ) (2020-06-13T06:43:37Z) - Exploring Racial Bias within Face Recognition via per-subject
Adversarially-Enabled Data Augmentation [15.924281804465252]
本稿では,オブジェクト単位のデータセットバランスの実現を目的とした,新たな逆派生データ拡張手法を提案する。
我々の目的は、様々な人種領域にまたがる顔画像を変換することで、合成データセットを自動構築することである。
両面比較では,提案手法が(人種)少数集団の認識性能に与える影響が示唆された。
論文 参考訳(メタデータ) (2020-04-19T19:46:32Z) - DotFAN: A Domain-transferred Face Augmentation Network for Pose and
Illumination Invariant Face Recognition [94.96686189033869]
本稿では,3次元モデルを用いたドメイン転送型顔強調ネットワーク(DotFAN)を提案する。
DotFANは、他のドメインから収集された既存のリッチフェイスデータセットから抽出された知識に基づいて、入力顔の一連の変種を生成することができる。
実験によると、DotFANは、クラス内の多様性を改善するために、小さな顔データセットを増やすのに有益である。
論文 参考訳(メタデータ) (2020-02-23T08:16:34Z) - Dual-Attention GAN for Large-Pose Face Frontalization [59.689836951934694]
本稿では,フォトリアリスティック顔フロンダル化のためのDA-GAN(Dual-Attention Generative Adversarial Network)を提案する。
具体的には、ローカル機能と長距離依存関係を統合するために、自己アテンションベースのジェネレータが導入された。
顔領域の局所的特徴を強調するために,新しい顔認識に基づく識別器を適用した。
論文 参考訳(メタデータ) (2020-02-17T20:00:56Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。