論文の概要: MeshPad: Interactive Sketch-Conditioned Artist-Designed Mesh Generation and Editing

• arxiv url: http://arxiv.org/abs/2503.01425v2
• Date: Mon, 17 Mar 2025 04:08:48 GMT
• ステータス: 翻訳完了
• システム内更新日: 2025-03-18 15:56:25.812230
• Title: MeshPad: Interactive Sketch-Conditioned Artist-Designed Mesh Generation and Editing
• Title（参考訳）: MeshPad:インタラクティブなスケッチによるアーティストデザインのメッシュ生成と編集
• Authors: Haoxuan Li, Ziya Erkoc, Lei Li, Daniele Sirigatti, Vladyslav Rozov, Angela Dai, Matthias Nießner,
• Abstract要約: MeshPadは、スケッチ入力から3Dメッシュを生成するジェネレーティブなアプローチである。 我々は、メッシュの領域の"削除"に編集を分解し、新しいメッシュ幾何学の"追加"に続き、一貫した編集を可能にすることに重点を置いている。 提案手法は,メッシュ三角形の追加と削除のために,大規模なTransformerモデルを利用した三角形列に基づくメッシュ表現に基づいている。
• 参考スコア（独自算出の注目度）: 64.84885028248395
• License:
• Abstract: We introduce MeshPad, a generative approach that creates 3D meshes from sketch inputs. Building on recent advances in artist-designed triangle mesh generation, our approach addresses the need for interactive mesh creation. To this end, we focus on enabling consistent edits by decomposing editing into 'deletion' of regions of a mesh, followed by 'addition' of new mesh geometry. Both operations are invoked by simple user edits of a sketch image, facilitating an iterative content creation process and enabling the construction of complex 3D meshes. Our approach is based on a triangle sequence-based mesh representation, exploiting a large Transformer model for mesh triangle addition and deletion. In order to perform edits interactively, we introduce a vertex-aligned speculative prediction strategy on top of our additive mesh generator. This speculator predicts multiple output tokens corresponding to a vertex, thus significantly reducing the computational cost of inference and accelerating the editing process, making it possible to execute each editing step in only a few seconds. Comprehensive experiments demonstrate that MeshPad outperforms state-of-the-art sketch-conditioned mesh generation methods, achieving more than 22% mesh quality improvement in Chamfer distance, and being preferred by 90% of participants in perceptual evaluations.
• Abstract（参考訳）: スケッチ入力から3Dメッシュを生成するジェネレーティブアプローチであるMeshPadを紹介する。 アーティストが設計したトライアングルメッシュ生成の最近の進歩に基づいて、我々のアプローチはインタラクティブメッシュ作成の必要性に対処する。 この目的のために、我々は、編集をメッシュの領域の"削除"に分解し、新しいメッシュ幾何学の"追加"で、一貫した編集を可能にすることに重点を置いている。 どちらの操作も、スケッチイメージの簡単なユーザ編集によって起動され、反復的なコンテンツ生成プロセスを容易にし、複雑な3Dメッシュの構築を可能にする。 提案手法は,メッシュ三角形の追加と削除のために,大規模なTransformerモデルを利用した三角形列に基づくメッシュ表現に基づいている。 対話的に編集を行うために,付加メッシュジェネレータ上に頂点整列型投機予測戦略を導入する。 この投機装置は、頂点に対応する複数の出力トークンを予測し、推論と編集プロセスの高速化の計算コストを大幅に削減し、各編集ステップをほんの数秒で実行できるようにする。 総合的な実験により、MeshPadは最先端のスケッチ条件付きメッシュ生成方法より優れ、チャンファー距離で22%以上のメッシュ品質改善を実現し、知覚評価の参加者の90%が好んでいることが示されている。

関連論文リスト

• Neural Surface Priors for Editable Gaussian Splatting [1.4153509273019282]
  本稿では,3次元ガウススプラッティングと暗黙の面表現を組み合わせた新しい手法を提案する。 提案手法は,ニューラルサインされた距離場を用いてシーン表面を再構成する。 編集を容易にするために,視覚的および幾何学的情報を軽量な三角形スーププロキシにエンコードする。
  論文  参考訳（メタデータ） (2024-11-27T13:06:37Z)
• LEMON: Localized Editing with Mesh Optimization and Neural Shaders [0.5499187928849248]
  ニューラル遅延シェーディングと局所メッシュ最適化を組み合わせたメッシュ編集パイプラインLEMONを提案する。 DTUデータセットを用いてパイプラインを評価し、現在の最先端手法よりも高速に微細に編集されたメッシュを生成することを示す。
  論文  参考訳（メタデータ） (2024-09-18T14:34:06Z)
• MeshAnything V2: Artist-Created Mesh Generation With Adjacent Mesh Tokenization [65.15226276553891]
  MeshAnything V2はArtist-Created Meshを作成するために設計された高度なメッシュ生成モデルである。 MeshAnything V2の背後にある重要なイノベーションは、新しいAdjacent Mesh Tokenization(AMT)メソッドです。
  論文  参考訳（メタデータ） (2024-08-05T15:33:45Z)
• Text-guided Controllable Mesh Refinement for Interactive 3D Modeling [48.226234898333]
  テキストプロンプトによって案内される入力粗い3Dメッシュに幾何学的詳細を加える新しい手法を提案する。 まず、入力粗い幾何学と入力テキストプロンプトに基づいて、単一のビューRGB画像を生成する。 第2に、新しいマルチビュー正規生成アーキテクチャを用いて、正常画像の6つの異なるビューを共同で生成する。 第3に、すべてのビューに対してメッシュを最適化し、出力として微細で詳細な幾何学を生成する。
  論文  参考訳（メタデータ） (2024-06-03T17:59:43Z)
• SERF: Fine-Grained Interactive 3D Segmentation and Editing with Radiance Fields [92.14328581392633]
  放射場を用いた対話型3Dセグメンテーションと編集アルゴリズムを新たに導入し,これをSERFと呼ぶ。 提案手法では,マルチビューアルゴリズムと事前学習した2Dモデルを統合することにより,ニューラルネットワーク表現を生成する。 この表現に基づいて,局所的な情報を保存し,変形に頑健な新しい表面レンダリング技術を導入する。
  論文  参考訳（メタデータ） (2023-12-26T02:50:42Z)
• Neural Impostor: Editing Neural Radiance Fields with Explicit Shape Manipulation [49.852533321916844]
  マルチグリッドの暗黙の場とともに、明示的な四面体メッシュを組み込んだハイブリッド表現であるNeural Impostorを導入する。 我々のフレームワークは、多グリッドのバリ中心座標符号化を利用して、暗黙のフィールドの明示的な形状操作と幾何的編集を橋渡しする。 合成オブジェクトと実際のキャプチャデータの両方を編集するなど、多様な例や実験を通して、システムの堅牢性と適応性を示す。
  論文  参考訳（メタデータ） (2023-10-09T04:07:00Z)
• 3D Neural Sculpting (3DNS): Editing Neural Signed Distance Functions [34.39282814876276]
  本研究では,ニューラルネットワークを用いて表現された符号付き距離関数の対話的編集を行う手法を提案する。 メッシュのための3D彫刻ソフトウェアにインスパイアされた私たちは、直感的で将来彫刻家やデジタルアーティストが利用できるブラシベースのフレームワークを使用しています。
  論文  参考訳（メタデータ） (2022-09-28T10:05:16Z)
• NeuMesh: Learning Disentangled Neural Mesh-based Implicit Field for Geometry and Texture Editing [39.71252429542249]
  本稿では,メッシュ頂点上の幾何およびテクスチャコードを用いて,ニューラル暗黙の場を符号化することで,メッシュに基づく新しい表現を提案する。 メッシュベース表現の空間的識別性を最大化する学習可能な手話指標を含む,いくつかの手法を開発した。 実データと合成データの両方における実験および編集例は,表現品質と編集能力において,本手法が優れていることを示す。
  論文  参考訳（メタデータ） (2022-07-25T05:30:50Z)
• Primal-Dual Mesh Convolutional Neural Networks [62.165239866312334]
  本稿では,グラフ・ニューラル・ネットワークの文献からトライアングル・メッシュへ引き起こされた原始双対のフレームワークを提案する。 提案手法は,3次元メッシュのエッジと顔の両方を入力として特徴付け,動的に集約する。 メッシュ単純化の文献から得られたツールを用いて、我々のアプローチに関する理論的知見を提供する。
  論文  参考訳（メタデータ） (2020-10-23T14:49:02Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。