論文の概要: Generative Escher Meshes
- arxiv url: http://arxiv.org/abs/2309.14564v4
- Date: Mon, 17 Jun 2024 23:57:57 GMT
- ステータス: 処理完了
- システム内更新日: 2024-06-20 05:04:09.912687
- Title: Generative Escher Meshes
- Title(参考訳): ジェネレーティブエッシャーメッシュ
- Authors: Noam Aigerman, Thibault Groueix,
- Abstract要約: 本稿では,完全自動テキスト誘導による周期的,周期的,タイル可能な2D画像生成手法を提案する。
タイピング時にシームレスな正方形テクスチャ画像とは対照的に,本手法では非正方形タイリングを生成する。
提案手法は,多種多様な周期パターンに対して,非自明なタイルを用いて,可塑性で魅力的な結果が得られることを示す。
- 参考スコア(独自算出の注目度): 14.29301974658956
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: This paper proposes a fully-automatic, text-guided generative method for producing perfectly-repeating, periodic, tile-able 2D imagery, such as the one seen on floors, mosaics, ceramics, and the work of M.C. Escher. In contrast to square texture images that are seamless when tiled, our method generates non-square tilings which comprise solely of repeating copies of the same object. It achieves this by optimizing both geometry and texture of a 2D mesh, yielding a non-square tile in the shape and appearance of the desired object, with close to no additional background details, that can tile the plane without gaps nor overlaps. We enable optimization of the tile's shape by an unconstrained, differentiable parameterization of the space of all valid tileable meshes for given boundary conditions stemming from a symmetry group. Namely, we construct a differentiable family of linear systems derived from a 2D mesh-mapping technique - Orbifold Tutte Embedding - by considering the mesh's Laplacian matrix as differentiable parameters. We prove that the solution space of these linear systems is exactly all possible valid tiling configurations, thereby providing an end-to-end differentiable representation for the entire space of valid tiles. We render the textured mesh via a differentiable renderer, and leverage a pre-trained image diffusion model to induce a loss on the resulting image, updating the mesh's parameters so as to make its appearance match the text prompt. We show our method is able to produce plausible, appealing results, with non-trivial tiles, for a variety of different periodic tiling patterns.
- Abstract(参考訳): 本稿では, 床, モザイク, セラミック, M.C.エッシャーの作品など, 完全反復的, 周期的, タイル可能な2次元画像の完全自動生成法を提案する。
タイルを組むとシームレスな正方形テクスチャ画像とは対照的に,本手法では,同じオブジェクトのコピーを繰り返すだけで構成される正方形でないタイリングを生成する。
これは、2Dメッシュの幾何学とテクスチャの両方を最適化し、望まれる物体の形状と外観に二乗のタイルを産み出す。
我々は、対称群から生じる任意の境界条件に対して有効な全てのメッシュの空間の制約のない微分可能なパラメータ化により、タイルの形状の最適化を可能にする。
すなわち、メッシュのラプラシア行列を微分可能なパラメータとして考慮し、2次元メッシュマッピング技術であるOrbifold Tutte Embeddingから導かれる線形系の微分可能な族を構築する。
これらの線形系の解空間は、正にすべての有効なタイリング構成であり、したがって、有効タイル全体の終端から終端までの微分可能表現を与える。
我々は、テクスチャ化されたメッシュを微分可能なレンダラでレンダリングし、事前訓練された画像拡散モデルを利用して、結果の画像に損失を生じさせ、メッシュのパラメータを更新し、その外観がテキストプロンプトにマッチするようにした。
本手法は,多種多様な周期的タイリングパターンに対して,非自明なタイルを用いて,可塑性で魅力的な結果が得られることを示す。
関連論文リスト
- SpaceMesh: A Continuous Representation for Learning Manifold Surface Meshes [61.110517195874074]
本稿では,ニューラルネットワークの出力として,複雑な接続性を持つ多様体多角形メッシュを直接生成する手法を提案する。
私たちの重要なイノベーションは、各メッシュで連続的な遅延接続空間を定義することです。
アプリケーションでは、このアプローチは生成モデルから高品質な出力を得るだけでなく、メッシュ修復のような挑戦的な幾何処理タスクを直接学習することを可能にする。
論文 参考訳(メタデータ) (2024-09-30T17:59:03Z) - Flexible Isosurface Extraction for Gradient-Based Mesh Optimization [65.76362454554754]
本研究では、勾配に基づくメッシュ最適化について考察し、スカラー場の等曲面として表現することで、3次元表面メッシュを反復的に最適化する。
我々は、幾何学的、視覚的、あるいは物理的目的に対して未知のメッシュを最適化するために特別に設計された、異面表現であるFlexiCubesを紹介する。
論文 参考訳(メタデータ) (2023-08-10T06:40:19Z) - MeshDiffusion: Score-based Generative 3D Mesh Modeling [68.40770889259143]
本研究では,シーンの自動生成と物理シミュレーションのための現実的な3次元形状生成の課題について考察する。
メッシュのグラフ構造を利用して、3Dメッシュを生成するのにシンプルだが非常に効果的な生成モデリング手法を用いる。
具体的には、変形可能な四面体格子でメッシュを表現し、この直接パラメトリゼーション上で拡散モデルを訓練する。
論文 参考訳(メタデータ) (2023-03-14T17:59:01Z) - NeuralMeshing: Differentiable Meshing of Implicit Neural Representations [63.18340058854517]
ニューラルな暗黙表現から表面メッシュを抽出する新しい微分可能なメッシュアルゴリズムを提案する。
本手法は,通常のテッセルレーションパターンと,既存の手法に比べて三角形面の少ないメッシュを生成する。
論文 参考訳(メタデータ) (2022-10-05T16:52:25Z) - EigenFairing: 3D Model Fairing using Image Coherence [0.884755712094096]
表面はしばしば、メッシュの顔に関連する3Dポイントとテクスチャの三角形メッシュとしてモデル化される。
点が実表面の最大曲率や不連続性の臨界点に置かれない場合、メッシュの面はモデル化された表面の近くには置かれない。
本稿では,物体の観察画像の集合と整合するように頂点を再構成して3次元表面モデルを完成させる手法を提案する。
論文 参考訳(メタデータ) (2022-06-10T18:13:19Z) - Deep Rectangling for Image Stitching: A Learning Baseline [57.76737888499145]
我々は不規則な境界やシーンに大きな多様性を持つ最初の画像縫合整形データセットを構築した。
実験では、従来の方法よりも定量的にも質的にも優位性を示す。
論文 参考訳(メタデータ) (2022-03-08T03:34:10Z) - SeamlessGAN: Self-Supervised Synthesis of Tileable Texture Maps [3.504542161036043]
単一入力例からタイル状テクスチャマップを自動生成できるSeamlessGANを提案する。
合成問題にのみ焦点をあてた既存の方法とは対照的に,本研究は合成性とタイル性の両方に同時に取り組む。
論文 参考訳(メタデータ) (2022-01-13T18:24:26Z) - Differentiable Surface Triangulation [40.13834693745158]
曲面三角関数の空間上での頂点ごとあるいは面ごとの微分可能な対象関数の最適化を可能にする微分曲面三角関数を提案する。
提案手法は, 適切な重み付けを施したデラウネー三角測量により, 任意の2次元三角測量が達成できることを示す。
形状を展開可能な集合に分解し,各集合を適切な境界制約で異なったメッシュ化することにより,アルゴリズムを3Dに拡張する。
論文 参考訳(メタデータ) (2021-09-22T12:42:43Z) - DeepMesh: Differentiable Iso-Surface Extraction [53.77622255726208]
本稿では,Deep Implicit Fieldsから表面メッシュを明示的に表現する方法を提案する。
我々の重要な洞察は、暗黙の場摂動が局所的な表面形状にどのように影響するかを推論することによって、最終的に表面サンプルの3次元位置を区別できるということである。
私たちはこれを利用して、そのトポロジを変えることができるDeepMesh – エンドツーエンドの差別化可能なメッシュ表現を定義する。
論文 参考訳(メタデータ) (2021-06-20T20:12:41Z) - Efficient texture mapping via a non-iterative global texture alignment [0.0]
与えられた3次元シーンのシームレスなテクスチャ再構築のための非定位的手法を提案する。
本手法は,グローバルな最適化フレームワークを用いて,一つのショットで最高のテクスチャアライメントを見出す。
実験の結果、他のアライメント法と比較して計算複雑性と性能が低いことが示された。
論文 参考訳(メタデータ) (2020-11-02T10:24:19Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。