Fugu-MT 論文翻訳(概要): Humans as Light Bulbs: 3D Human Reconstruction from Thermal Reflection

論文の概要: Humans as Light Bulbs: 3D Human Reconstruction from Thermal Reflection

arxiv url: http://arxiv.org/abs/2305.01652v1
Date: Tue, 2 May 2023 17:59:55 GMT
ステータス: 処理完了
システム内更新日: 2023-05-03 13:21:29.776253
Title: Humans as Light Bulbs: 3D Human Reconstruction from Thermal Reflection
Title（参考訳）: 電球としての人間:熱反射による3次元再構成
Authors: Ruoshi Liu, Carl Vondrick
Abstract要約: 我々は、人物の位置を特定し、ポーズを再構築するために、人物の物体への熱的反射を利用する。本研究では, 対象物, 人, 熱反射を共同でモデル化する合成分析フレームワークを提案する。
参考スコア（独自算出の注目度）: 25.02029973957123
License: http://creativecommons.org/licenses/by/4.0/
Abstract: The relatively hot temperature of the human body causes people to turn into long-wave infrared light sources. Since this emitted light has a larger wavelength than visible light, many surfaces in typical scenes act as infrared mirrors with strong specular reflections. We exploit the thermal reflections of a person onto objects in order to locate their position and reconstruct their pose, even if they are not visible to a normal camera. We propose an analysis-by-synthesis framework that jointly models the objects, people, and their thermal reflections, which allows us to combine generative models with differentiable rendering of reflections. Quantitative and qualitative experiments show our approach works in highly challenging cases, such as with curved mirrors or when the person is completely unseen by a normal camera.
Abstract（参考訳）: 人体の比較的高温の温度は、人々は長い波長の赤外線光源に変わる。この発光光は可視光よりも波長が大きいため、典型的な場面の多くの表面は、強いスペクトル反射を持つ赤外線ミラーとして機能する。我々は、通常のカメラでは見えなくても、人物の位置を特定し、ポーズを再構築するために、人物の物体への熱反射を利用する。本研究では, 生成モデルと微分可能な反射のレンダリングを組み合わせることで, 物体, 人物, 熱反射を協調的にモデル化する分析・合成フレームワークを提案する。定量的で質的な実験は、カーブミラーや通常のカメラで完全に見えない場合など、非常に困難なケースで我々のアプローチが機能することを示している。

関連論文リスト

Monocular Identity-Conditioned Facial Reflectance Reconstruction [71.90507628715388]
既存の方法は、顔の反射率モデルを学ぶために、大量の光ステージキャプチャーデータに依存している。我々は、UV空間ではなく画像空間で反射率を学習し、ID2Reflectanceというフレームワークを提案する。本フレームワークは,訓練に限られた反射率データを用いながら,単一の画像の反射率マップを直接推定することができる。
論文参考訳（メタデータ） (2024-03-30T09:43:40Z)
REF$^2$-NeRF: Reflection and Refraction aware Neural Radiance Field [4.714335699701277]
本稿では,ガラスケースを含むシーンのNeRFモデリング手法を提案する。リフレクションとリフレクションは、視聴者の視点に依存して独立な要素を用いてモデル化される。既存の手法と比較して,ガラス屈折率と全体像のより正確なモデリングが可能である。
論文参考訳（メタデータ） (2023-11-28T12:14:22Z)
Eclipse: Disambiguating Illumination and Materials using Unintended Shadows [59.77752479405381]
我々は, 意図しない影を利用して, 拡散物体からでも, 正確な物質や照明を回収できることを示す。本稿では,物体の画像を用いて空間的に変化する物質を共同で回収するモンテカルロ線トレーシング法を提案する。
論文参考訳（メタデータ） (2023-05-25T17:59:52Z)
Relightify: Relightable 3D Faces from a Single Image via Diffusion Models [86.3927548091627]
単一画像からの3次元顔BRDF再構成を高精度に行うために,拡散モデルを用いた最初のアプローチを提案する。既存の手法とは対照的に,観測されたテクスチャを直接入力画像から取得することで,より忠実で一貫した推定が可能となる。
論文参考訳（メタデータ） (2023-05-10T11:57:49Z)
Nighttime Smartphone Reflective Flare Removal Using Optical Center Symmetry Prior [81.64647648269889]
反射フレア(英: Reflective flare)は、レンズの内部に光が反射し、明るい点や「ゴースト効果」を引き起こす現象である。我々は、反射フレアと光源が常にレンズの光学中心の周囲に対称であることを示す光中心対称性を事前に提案する。多様なリアルな反射フレアパターンを含むブラケットフレアと呼ばれる最初の反射フレア除去データセットを作成します。
論文参考訳（メタデータ） (2023-03-27T09:44:40Z)
Predicting Surface Reflectance Properties of Outdoor Scenes Under Unknown Natural Illumination [6.767885381740952]
本稿では,未知の自然照明下での屋外シーンの表面反射特性を予測するための完全な枠組みを提案する。 BRDFの入射光と出射方向を含む2つの構成成分に問題を再計算します。反射率特性の予測によるレンダリングが視覚的にテクスチャと類似していることを示す実験を行った。
論文参考訳（メタデータ） (2021-05-14T13:31:47Z)
Reconstructing 3D Human Pose by Watching Humans in the Mirror [41.894948553970245]
鏡を通して人や人のイメージを見ることができる単一の画像から、3D人間のポーズを再構築する新しいタスクを紹介します。我々は,ミラー対称性の制約を利用して正確な3次元ポーズ再構成を行う最適化手法を開発した。
論文参考訳（メタデータ） (2021-04-01T08:42:51Z)
Shape, Illumination, and Reflectance from Shading [86.71603503678216]
コンピュータビジョンにおける根本的な問題は、フラットな2次元画像から世界の本質的な3次元構造を推定することである。表面は滑らかである傾向があり、塗料は均一である傾向があり、照明は自然である傾向にある。我々の技術は、いくつかの古典的なコンピュータビジョン問題のスーパーセットと見なすことができる。
論文参考訳（メタデータ） (2020-10-07T18:14:41Z)
Monocular Reconstruction of Neural Face Reflectance Fields [0.0]
顔の反射場は、複雑な照明効果の原因となる反射特性を記述する。モノクル画像から顔の反射率を推定する既存の手法は、特異成分を加えるアプローチはほとんどないが、顔は拡散していると仮定している。顔反射に対する新しいニューラル表現法を提案し、単一の単眼画像から最終出現に寄与する反射の全ての成分を推定する。
論文参考訳（メタデータ） (2020-08-24T08:19:05Z)
3D Human Shape Reconstruction from a Polarization Image [34.240256720930155]
本稿では, 単偏光2次元画像から衣服の3次元体形状を推定する問題に対処する。専用2段階のディープラーニングアプローチであるSfPが提案されている。
論文参考訳（メタデータ） (2020-07-17T22:36:02Z)
Polarized Reflection Removal with Perfect Alignment in the Wild [66.48211204364142]
野生の偏光画像からの反射を除去するための新しい定式化法を提案する。まず、既存のリフレクション除去データセットの不整合問題を同定する。我々は100種類以上のガラスを用いた新しいデータセットを構築し、得られた透過画像は入力された混合画像と完全に一致している。
論文参考訳（メタデータ） (2020-03-28T13:29:31Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。