論文の概要: Learning Structured Output Representations from Attributes using Deep
Conditional Generative Models
- arxiv url: http://arxiv.org/abs/2305.00980v1
- Date: Sun, 30 Apr 2023 17:25:31 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-03 16:40:50.604380
- Title: Learning Structured Output Representations from Attributes using Deep
Conditional Generative Models
- Title(参考訳): deep conditional generative modelを用いた属性からの構造化出力表現の学習
- Authors: Mohamed Debbagh
- Abstract要約: 本稿では,条件付き変分オートエンコーダアーキテクチャを再現し,属性を条件付き画像でトレーニングする。
毛髪の色や眼鏡などの特徴の異なる新しい顔と、異なる鳥類種のサンプルを創り出そうとする。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Structured output representation is a generative task explored in computer
vision that often times requires the mapping of low dimensional features to
high dimensional structured outputs. Losses in complex spatial information in
deterministic approaches such as Convolutional Neural Networks (CNN) lead to
uncertainties and ambiguous structures within a single output representation. A
probabilistic approach through deep Conditional Generative Models (CGM) is
presented by Sohn et al. in which a particular model known as the Conditional
Variational Auto-encoder (CVAE) is introduced and explored. While the original
paper focuses on the task of image segmentation, this paper adopts the CVAE
framework for the task of controlled output representation through attributes.
This approach allows us to learn a disentangled multimodal prior distribution,
resulting in more controlled and robust approach to sample generation. In this
work we recreate the CVAE architecture and train it on images conditioned on
various attributes obtained from two image datasets; the Large-scale CelebFaces
Attributes (CelebA) dataset and the Caltech-UCSD Birds (CUB-200-2011) dataset.
We attempt to generate new faces with distinct attributes such as hair color
and glasses, as well as different bird species samples with various attributes.
We further introduce strategies for improving generalized sample generation by
applying a weighted term to the variational lower bound.
- Abstract(参考訳): 構造化出力表現はコンピュータビジョンで探索された生成タスクであり、しばしば高次元構造出力への低次元特徴のマッピングを必要とする。
畳み込みニューラルネットワーク(cnn)のような決定論的アプローチにおける複雑な空間情報の損失は、単一の出力表現内の不確実性と曖昧な構造をもたらす。
sohnらによって、条件付き変分オートエンコーダ(cvae)として知られる特定のモデルが導入され、探求される。
本論文は,画像分割の課題に焦点をあてる一方で,属性による出力表現を制御するタスクにCVAEフレームワークを採用する。
このアプローチにより、異方性のあるマルチモーダル事前分布を学習することができ、サンプル生成に対してより制御的で堅牢なアプローチが実現できます。
本研究では,cvaeアーキテクチャを再現し,2つの画像データセットから得られた各種属性,すなわちcelebfaces attribute (celeba) データセットとcaltech-ucsd birds (cub-200-2011) データセットに基づいてトレーニングを行う。
我々は,毛髪色や眼鏡などの異なる属性の新たな顔や,様々な属性の異なる鳥類の標本の生成を試みる。
さらに,変分下限に重み付け項を適用することにより,一般化されたサンプル生成を改善するための戦略を提案する。
関連論文リスト
- Neural Clustering based Visual Representation Learning [61.72646814537163]
クラスタリングは、機械学習とデータ分析における最も古典的なアプローチの1つである。
本稿では,特徴抽出をデータから代表者を選択するプロセスとみなすクラスタリング(FEC)による特徴抽出を提案する。
FECは、個々のクラスタにピクセルをグループ化して抽象的な代表を配置し、現在の代表とピクセルの深い特徴を更新する。
論文 参考訳(メタデータ) (2024-03-26T06:04:50Z) - Attribute-Aware Deep Hashing with Self-Consistency for Large-Scale
Fine-Grained Image Retrieval [65.43522019468976]
本稿では属性認識ハッシュコードを生成するための自己整合性を持つ属性認識ハッシュネットワークを提案する。
本研究では,高レベル属性固有ベクトルを教師なしで蒸留する再構成タスクのエンコーダ・デコーダ構造ネットワークを開発する。
我々のモデルは,これらの属性ベクトルに特徴デコリレーション制約を設けて,それらの代表的能力を強化する。
論文 参考訳(メタデータ) (2023-11-21T08:20:38Z) - T1: Scaling Diffusion Probabilistic Fields to High-Resolution on Unified
Visual Modalities [69.16656086708291]
拡散確率場(DPF)は、距離空間上で定義された連続関数の分布をモデル化する。
本稿では,局所構造学習に着目したビューワイズサンプリングアルゴリズムによる新しいモデルを提案する。
モデルは、複数のモダリティを統一しながら、高解像度のデータを生成するためにスケールすることができる。
論文 参考訳(メタデータ) (2023-05-24T03:32:03Z) - The geometry of hidden representations of large transformer models [43.16765170255552]
大規模トランスは、さまざまなデータタイプをまたいだ自己教師型データ分析に使用される強力なアーキテクチャである。
データセットのセマンティック構造は、ある表現と次の表現の間の変換のシーケンスから現れることを示す。
本研究は,データセットのセマンティクス情報が第1ピークの終わりによりよく表現されることを示し,この現象を多種多様なデータセットで訓練された多くのモデルで観測できることを示した。
論文 参考訳(メタデータ) (2023-02-01T07:50:26Z) - DeepDC: Deep Distance Correlation as a Perceptual Image Quality
Evaluator [53.57431705309919]
ImageNet Pre-trained Deep Neural Network (DNN)は、効果的な画像品質評価(IQA)モデルを構築するための顕著な転送性を示す。
我々は,事前学習DNN機能のみに基づく新しいフル参照IQA(FR-IQA)モデルを開発した。
5つの標準IQAデータセット上で,提案した品質モデルの優位性を示すため,包括的実験を行った。
論文 参考訳(メタデータ) (2022-11-09T14:57:27Z) - Multi-Facet Clustering Variational Autoencoders [9.150555507030083]
画像などの高次元データは通常、クラスタリング可能な複数の興味深い特徴を特徴付ける。
MFCVAE(Multi-Facet Clustering Variational Autoencoders)を導入する。
MFCVAEは複数のクラスタリングを同時に学習し、完全に教師なしでエンドツーエンドで訓練されている。
論文 参考訳(メタデータ) (2021-06-09T17:36:38Z) - Analogous to Evolutionary Algorithm: Designing a Unified Sequence Model [58.17021225930069]
実演的進化アルゴリズム(EA)と類似した視覚変換器の合理性について説明する。
我々は、より効率的なEATモデルを提案し、様々なタスクに柔軟に対処するタスク関連ヘッドを設計する。
近年のビジョントランスに比べて,イメージネット分類作業における最先端の成果が得られている。
論文 参考訳(メタデータ) (2021-05-31T16:20:03Z) - MOGAN: Morphologic-structure-aware Generative Learning from a Single
Image [59.59698650663925]
近年,1つの画像のみに基づく生成モデルによる完全学習が提案されている。
多様な外観のランダムなサンプルを生成するMOGANというMOrphologic-structure-aware Generative Adversarial Networkを紹介します。
合理的な構造の維持や外観の変化など、内部機能に重点を置いています。
論文 参考訳(メタデータ) (2021-03-04T12:45:23Z) - VAE-Info-cGAN: Generating Synthetic Images by Combining Pixel-level and
Feature-level Geospatial Conditional Inputs [0.0]
画素レベル(PLC)と特徴レベル(FLC)を同時に条件付けした意味的リッチな画像を合成するための条件生成モデルを提案する。
GPSデータセットを用いた実験では,提案モデルが地理的に異なる場所にまたがる様々な形態のマクロアグリゲーションを正確に生成できることが示されている。
論文 参考訳(メタデータ) (2020-12-08T03:46:19Z) - Generating Annotated High-Fidelity Images Containing Multiple Coherent
Objects [10.783993190686132]
コンテキスト情報を明示的に必要とせずに、複数のオブジェクトで画像を合成できるマルチオブジェクト生成フレームワークを提案する。
我々は,Multi-MNISTおよびCLEVRデータセットを用いた実験により,コヒーレンシーと忠実さの保存方法を示す。
論文 参考訳(メタデータ) (2020-06-22T11:33:55Z) - Network Bending: Expressive Manipulation of Deep Generative Models [0.2062593640149624]
ネットワーク曲げと呼ばれる深層生成モデルを操作するための新しいフレームワークを提案する。
生成過程において意味論的に意味のある側面を直接操作できるだけでなく、幅広い表現的な結果を得ることができるかを示す。
論文 参考訳(メタデータ) (2020-05-25T21:48:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。