論文の概要: Shadow Art Revisited: A Differentiable Rendering Based Approach
- arxiv url: http://arxiv.org/abs/2107.14539v1
- Date: Fri, 30 Jul 2021 10:43:48 GMT
- ステータス: 処理完了
- システム内更新日: 2021-08-02 16:10:48.353709
- Title: Shadow Art Revisited: A Differentiable Rendering Based Approach
- Title(参考訳): shadow art再訪:差別化可能なレンダリングベースのアプローチ
- Authors: Kaustubh Sadekar, Ashish Tiwari, Shanmuganathan Raman
- Abstract要約: 我々は3次元彫刻を得るために、異なるレンダリングに基づく最適化フレームワークを用いて影芸術を再考する。
シェードアート彫刻の生成に微分レンダリングを使用するという選択は、画像データのみから基礎となる3次元幾何学を学習する能力に起因していると考えられる。
本研究では,顔の影を映し出す3D彫刻の製作,アニメーション映画キャラクタの製作,基礎となる形状をスケッチベースで再現するフレームワークの適用性を実証する。
- 参考スコア(独自算出の注目度): 26.910401398827123
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: While recent learning based methods have been observed to be superior for
several vision-related applications, their potential in generating artistic
effects has not been explored much. One such interesting application is Shadow
Art - a unique form of sculptural art where 2D shadows cast by a 3D sculpture
produce artistic effects. In this work, we revisit shadow art using
differentiable rendering based optimization frameworks to obtain the 3D
sculpture from a set of shadow (binary) images and their corresponding
projection information. Specifically, we discuss shape optimization through
voxel as well as mesh-based differentiable renderers. Our choice of using
differentiable rendering for generating shadow art sculptures can be attributed
to its ability to learn the underlying 3D geometry solely from image data, thus
reducing the dependence on 3D ground truth. The qualitative and quantitative
results demonstrate the potential of the proposed framework in generating
complex 3D sculptures that go beyond those seen in contemporary art pieces
using just a set of shadow images as input. Further, we demonstrate the
generation of 3D sculptures to cast shadows of faces, animated movie
characters, and applicability of the framework to sketch-based 3D
reconstruction of underlying shapes.
- Abstract(参考訳): 近年の学習に基づく手法は視覚関連の応用に優れていることが観察されているが、芸術効果を生み出す可能性はあまり調査されていない。
シャドウアート(シャドウアート、Shadow Art)は、3D彫刻で作られた2Dの影が芸術効果を生み出す、ユニークな彫刻芸術である。
本研究では,異なるレンダリングに基づく最適化フレームワークを用いて影芸術を再考し,影(バイナリ)画像とそれに対応する投影情報から3次元彫刻を得る。
具体的には,voxelによる形状最適化とメッシュベースの微分可能レンダラについて論じる。
シェードアート彫刻の生成に微分可能レンダリングを用いるという選択は、画像データのみから基礎となる3次元幾何学を学習する能力に起因し、3次元地上真実への依存を減らすことができる。
定性的・定量的な結果から,影像のセットを入力として,現代美術作品に見られるような複雑な3d彫刻を生成できる可能性が示唆された。
さらに,顔の影を映し出す3D彫刻の製作,アニメーション映画キャラクタの製作,基礎となる形状をスケッチベースで再現するフレームワークの適用性を実証した。
関連論文リスト
- ART3D: 3D Gaussian Splatting for Text-Guided Artistic Scenes Generation [18.699440994076003]
ART3Dは拡散モデルと3Dガウススプラッティング技術を組み合わせた新しいフレームワークである。
深度情報と初期芸術画像を活用することにより,点雲マップを生成する。
また、3Dシーンの整合性を高めるための奥行き整合性モジュールを提案する。
論文 参考訳(メタデータ) (2024-05-17T03:19:36Z) - UltrAvatar: A Realistic Animatable 3D Avatar Diffusion Model with Authenticity Guided Textures [80.047065473698]
幾何学の忠実度を高めたUltrAvatarと呼ばれる新しい3次元アバター生成手法を提案し,光を必要とせずに物理ベースレンダリング(PBR)テクスチャの質を向上する。
提案手法の有効性とロバスト性を実証し,実験において最先端の手法よりも高い性能を示した。
論文 参考訳(メタデータ) (2024-01-20T01:55:17Z) - En3D: An Enhanced Generative Model for Sculpting 3D Humans from 2D
Synthetic Data [36.51674664590734]
本研究では,高品質な3次元アバターの小型化を図ったEn3Dを提案する。
従来の3Dデータセットの不足や、視角が不均衡な限られた2Dコレクションと異なり、本研究の目的は、ゼロショットで3D人間を作れる3Dの開発である。
論文 参考訳(メタデータ) (2024-01-02T12:06:31Z) - ARTIC3D: Learning Robust Articulated 3D Shapes from Noisy Web Image
Collections [71.46546520120162]
単眼画像から動物体のような3D関節形状を推定することは、本質的に困難である。
本稿では,スパース画像コレクションから各物体の形状を再構築する自己教師型フレームワークARTIC3Dを提案する。
我々は、剛性部分変換の下で、描画された形状とテクスチャを微調整することで、現実的なアニメーションを作成する。
論文 参考訳(メタデータ) (2023-06-07T17:47:50Z) - Single-Shot Implicit Morphable Faces with Consistent Texture
Parameterization [91.52882218901627]
本稿では,3次元形態素な顔モデルを構築するための新しい手法を提案する。
本手法は, 最先端手法と比較して, フォトリアリズム, 幾何, 表現精度を向上する。
論文 参考訳(メタデータ) (2023-05-04T17:58:40Z) - Evolving Three Dimension (3D) Abstract Art: Fitting Concepts by Language [2.7336516660166295]
進化戦略 (ES) をブリッジし, シーンのパラメータ化をカスタマイズして3次元レンダリングを行うことにより, 抽象的な3次元アートを作る際の計算クリエイティビティを探求する。
我々のアプローチは、特定の角度から見ると、自然言語で表現されたアーティストの仕様のように見える映画に、半透明な三角形を配置することができる。
論文 参考訳(メタデータ) (2023-04-24T07:47:48Z) - Cross-Modal 3D Shape Generation and Manipulation [62.50628361920725]
本稿では,2次元のモダリティと暗黙の3次元表現を共用した多モード生成モデルを提案する。
グレースケールラインスケッチとレンダリングカラー画像の2つの代表的な2次元モーダル性について,本フレームワークの評価を行った。
論文 参考訳(メタデータ) (2022-07-24T19:22:57Z) - A Shading-Guided Generative Implicit Model for Shape-Accurate 3D-Aware
Image Synthesis [163.96778522283967]
そこで本研究では,シェーディング誘導型生成暗黙モデルを提案する。
正確な3D形状は、異なる照明条件下でリアルなレンダリングをもたらす必要がある。
複数のデータセットに対する実験により,提案手法が光リアルな3次元画像合成を実現することを示す。
論文 参考訳(メタデータ) (2021-10-29T10:53:12Z) - 3D Photography using Context-aware Layered Depth Inpainting [50.66235795163143]
本稿では、1枚のRGB-D入力画像を3D写真に変換する方法を提案する。
学習に基づく着色モデルでは,新しい局所的な色と深度を隠蔽領域に合成する。
結果の3D写真は、モーションパララックスで効率よくレンダリングできる。
論文 参考訳(メタデータ) (2020-04-09T17:59:06Z) - Learning to Shadow Hand-drawn Sketches [5.929956715430167]
線画スケッチと照明方向のペアから、細部と正確な芸術的影を自動生成する手法を提案する。
我々は、光の方向をタグ付けした線図と影の組の1000のサンプルのデータセットを新たに提供した。
論文 参考訳(メタデータ) (2020-02-26T21:57:17Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。