論文の概要: Generating Thermal Image Data Samples using 3D Facial Modelling
Techniques and Deep Learning Methodologies
- arxiv url: http://arxiv.org/abs/2005.01923v2
- Date: Thu, 7 May 2020 11:02:04 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-06 13:04:25.735372
- Title: Generating Thermal Image Data Samples using 3D Facial Modelling
Techniques and Deep Learning Methodologies
- Title(参考訳): 3次元顔モデリング技術とディープラーニング手法を用いた熱画像データサンプル生成
- Authors: Muhammad Ali Farooq and Peter Corcoran
- Abstract要約: 我々は1つの正面の顔のポーズを用いて3次元の異なる顔のポーズを生成するためにデータセットを使用した。
精製された出力は、コントラスト調整が良く、ノイズレベルが低く、暗黒領域の露出度も高い。
提案した研究の次のフェーズでは、画像の精細化バージョンを使用して3次元顔形状構造を作成する。
- 参考スコア(独自算出の注目度): 0.40611352512781856
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Methods for generating synthetic data have become of increasing importance to
build large datasets required for Convolution Neural Networks (CNN) based deep
learning techniques for a wide range of computer vision applications. In this
work, we extend existing methodologies to show how 2D thermal facial data can
be mapped to provide 3D facial models. For the proposed research work we have
used tufts datasets for generating 3D varying face poses by using a single
frontal face pose. The system works by refining the existing image quality by
performing fusion based image preprocessing operations. The refined outputs
have better contrast adjustments, decreased noise level and higher exposedness
of the dark regions. It makes the facial landmarks and temperature patterns on
the human face more discernible and visible when compared to original raw data.
Different image quality metrics are used to compare the refined version of
images with original images. In the next phase of the proposed study, the
refined version of images is used to create 3D facial geometry structures by
using Convolution Neural Networks (CNN). The generated outputs are then
imported in blender software to finally extract the 3D thermal facial outputs
of both males and females. The same technique is also used on our thermal face
data acquired using prototype thermal camera (developed under Heliaus EU
project) in an indoor lab environment which is then used for generating
synthetic 3D face data along with varying yaw face angles and lastly facial
depth map is generated.
- Abstract(参考訳): 畳み込みニューラルネットワーク(cnn)ベースのディープラーニング技術に必要な大規模データセットを、幅広いコンピュータビジョンアプリケーション向けに構築することが、合成データを生成する方法の重要性が高まっている。
本研究では,2次元熱顔データを用いて3次元顔モデルを実現する方法を示すため,既存の手法を拡張した。
提案する研究では,タフツデータセットを用いて,正面の1つのポーズを用いて3次元の異なる顔ポーズを生成する。
このシステムは、融合ベースの画像前処理操作をすることで、既存の画像品質を精査する。
精製された出力はコントラスト調整が良く、ノイズレベルが低く、暗黒領域の露出度も高い。
顔のランドマークや、人間の顔の温度パターンを、元の生データと比べて識別しやすく、目に見えるものにします。
画像の精細なバージョンと原画像を比較するために、画像品質のメトリクスが異なる。
提案研究の次の段階では、畳み込みニューラルネットワーク(cnn)を用いて3次元顔形状構造を作成するために画像の洗練版が用いられる。
生成した出力はブレンダーソフトウェアにインポートされ、最終的に男性と女性の3D熱顔出力を抽出する。
同様の技術は、プロトタイプのサーマルカメラ(heliaus euプロジェクトによって開発された)で得られた熱顔データでも、屋内実験室環境で使用され、様々なヨー顔角とともに合成3d顔データを生成するのに使われ、最後に顔深度マップが生成される。
関連論文リスト
- GeoGen: Geometry-Aware Generative Modeling via Signed Distance Functions [22.077366472693395]
単一ビューコレクションから3次元形状と画像を合成するための新しい生成手法を提案する。
ニューラルラディアンス場を用いたボリュームレンダリングを用いることで、生成した幾何学はノイズが多く、制約がないという重要な制限を継承する。
エンド・ツー・エンドで訓練された新しいSDFベースの3D生成モデルであるGeoGenを提案する。
論文 参考訳(メタデータ) (2024-06-06T17:00:10Z) - 3D Human Reconstruction in the Wild with Synthetic Data Using Generative Models [52.96248836582542]
本稿では,人間の画像とそれに対応する3Dメッシュアノテーションをシームレスに生成できるHumanWildという,最近の拡散モデルに基づく効果的なアプローチを提案する。
生成モデルを排他的に活用することにより,大規模な人体画像と高品質なアノテーションを生成し,実世界のデータ収集の必要性を解消する。
論文 参考訳(メタデータ) (2024-03-17T06:31:16Z) - Fake It Without Making It: Conditioned Face Generation for Accurate 3D
Face Reconstruction [5.079602839359523]
本稿では,250Kのフォトリアリスティック画像とそれに対応する形状パラメータと深度マップの大規模な合成データセットを生成する手法について述べる。
人間の顔のFLAME 3D Morphable Model(3DMM)から採取した深度マップ上での安定拡散条件により,人種と性別のバランスがとれるようにデザインされた多様な形状の顔画像を生成することができる。
我々は、3Dの監督や手動の3Dアセット作成を必要とせずに、NoWベンチマーク上での競合性能を実現する、SynthFaceでトレーニングされたディープニューラルネットワークであるControlFaceを提案する。
論文 参考訳(メタデータ) (2023-07-25T16:42:06Z) - CGOF++: Controllable 3D Face Synthesis with Conditional Generative
Occupancy Fields [52.14985242487535]
生成した顔画像の3次元制御性を実現する条件付き3次元顔合成フレームワークを提案する。
中心となるのは条件付き生成操作場(cGOF++)であり、それによって生成された顔の形状が与えられた3Dモルファブルモデル(3DMM)メッシュに適合するように効果的に強制される。
提案手法の有効性を検証し, 最先端の2次元顔合成法よりも高精度な3次元制御性を示す実験を行った。
論文 参考訳(メタデータ) (2022-11-23T19:02:50Z) - Facial Geometric Detail Recovery via Implicit Representation [147.07961322377685]
そこで本研究では,一眼の顔画像のみを用いて,テクスチャガイドを用いた幾何的細部復元手法を提案する。
提案手法は,高品質なテクスチャ補完と暗黙の面の強力な表現性を組み合わせたものである。
本手法は, 顔の正確な細部を復元するだけでなく, 正常部, アルベド部, シェーディング部を自己監督的に分解する。
論文 参考訳(メタデータ) (2022-03-18T01:42:59Z) - AvatarMe++: Facial Shape and BRDF Inference with Photorealistic
Rendering-Aware GANs [119.23922747230193]
そこで本研究では,レンダリング可能な3次元顔形状とBRDFの再構成を,単一の"in-the-wild"画像から実現した最初の手法を提案する。
本手法は,1枚の低解像度画像から,高解像度の3次元顔の再構成を行う。
論文 参考訳(メタデータ) (2021-12-11T11:36:30Z) - Fast-GANFIT: Generative Adversarial Network for High Fidelity 3D Face
Reconstruction [76.1612334630256]
我々は、GAN(Generative Adversarial Networks)とDCNN(Deep Convolutional Neural Networks)の力を利用して、単一画像から顔のテクスチャと形状を再構築する。
3次元顔再構成を保存したフォトリアリスティックでアイデンティティに優れた結果を示し, 初めて, 高精度な顔テクスチャ再構成を実現する。
論文 参考訳(メタデータ) (2021-05-16T16:35:44Z) - OSTeC: One-Shot Texture Completion [86.23018402732748]
ワンショット3D顔テクスチャ補完のための教師なしアプローチを提案する。
提案手法では,2次元フェースジェネレータで回転画像を再構成することにより,入力画像を3次元で回転させ,見えない領域を埋め込む。
完成したテクスチャーをジェネレーターに投影することで、ターゲットイメージを先取りします。
論文 参考訳(メタデータ) (2020-12-30T23:53:26Z) - Towards High-Fidelity 3D Face Reconstruction from In-the-Wild Images
Using Graph Convolutional Networks [32.859340851346786]
本研究では,一眼レフ画像から高忠実度テクスチャで3次元顔形状を再構成する手法を提案する。
提案手法は, 質的, 定量的な比較において, 高品質な結果を生成し, 最先端の手法より優れる。
論文 参考訳(メタデータ) (2020-03-12T08:06:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。