論文の概要: InstantSticker: Realistic Decal Blending via Disentangled Object Reconstruction

• arxiv url: http://arxiv.org/abs/2504.06620v1
• Date: Wed, 09 Apr 2025 06:36:36 GMT
• ステータス: 翻訳完了
• システム内更新日: 2025-04-10 13:06:26.526622
• Title: InstantSticker: Realistic Decal Blending via Disentangled Object Reconstruction
• Title（参考訳）: InstantSticker: 斜め物体再構成によるリアルディザルブレンディング
• Authors: Yi Zhang, Xiaoyang Huang, Yishun Dou, Yue Shi, Rui Shi, Ye Chen, Bingbing Ni, Wenjun Zhang,
• Abstract要約: InstantStickerは、画像ベースライティング(IBL)に基づく再構成パイプラインであり、高度にリアルなデカールブレンディングに焦点を当てている。 即時編集にはディズニーBRDFモデルを用い,3チャンネル拡散アルベドで材料色を明確に定義する。 本実験では,デカル領域の局所的な幾何学的ワープを評価するために,RVW(Ratio Variance Warping)メトリクスを導入した。
• 参考スコア（独自算出の注目度）: 43.9394028022126
• License:
• Abstract: We present InstantSticker, a disentangled reconstruction pipeline based on Image-Based Lighting (IBL), which focuses on highly realistic decal blending, simulates stickers attached to the reconstructed surface, and allows for instant editing and real-time rendering. To achieve stereoscopic impression of the decal, we introduce shadow factor into IBL, which can be adaptively optimized during training. This allows the shadow brightness of surfaces to be accurately decomposed rather than baked into the diffuse color, ensuring that the edited texture exhibits authentic shading. To address the issues of warping and blurriness in previous methods, we apply As-Rigid-As-Possible (ARAP) parameterization to pre-unfold a specified area of the mesh and use the local UV mapping combined with a neural texture map to enhance the ability to express high-frequency details in that area. For instant editing, we utilize the Disney BRDF model, explicitly defining material colors with 3-channel diffuse albedo. This enables instant replacement of albedo RGB values during the editing process, avoiding the prolonged optimization required in previous approaches. In our experiment, we introduce the Ratio Variance Warping (RVW) metric to evaluate the local geometric warping of the decal area. Extensive experimental results demonstrate that our method surpasses previous decal blending methods in terms of editing quality, editing speed and rendering speed, achieving the state-of-the-art.
• Abstract（参考訳）: InstantStickerは、画像ベースライティング(IBL)に基づくアンタングル型再構成パイプラインで、高度にリアルなデカールブレンディングに焦点を当て、再構成表面に取り付けられたステッカーをシミュレートし、即時編集とリアルタイムレンダリングを可能にする。 デカールの立体的印象を得るため,トレーニング中に適応的に最適化できるIBLにシャドウファクターを導入する。 これにより、表面の影の明るさが拡散色に焼かれるのではなく正確に分解され、編集されたテクスチャが本物のシェーディングを示すことが保証される。 従来手法におけるワープとぼかしの問題に対処するために、As-Rigid-As-Possible(ARAP)パラメータ化を適用し、メッシュの特定領域を事前展開し、局所紫外線マッピングとニューラルテクスチャマップを組み合わせることにより、その領域における高周波の詳細を表現する能力を高める。 即時編集にはディズニーBRDFモデルを用い,3チャンネル拡散アルベドで材料色を明確に定義する。 これにより、編集プロセス中にアルベドのRGB値を即時に置き換えることができ、以前のアプローチで必要とされる長い最適化を避けることができる。 本実験では,デカル領域の局所的な幾何学的ワープを評価するために,RVW(Ratio Variance Warping)メトリクスを導入した。 提案手法は, 編集品質, 編集速度, レンダリング速度の面で, 従来の十進ブレンディング法を超越し, 最先端技術を実現していることを示す。

関連論文リスト

• Real-time Neural Rendering of LiDAR Point Clouds [0.2621434923709917]
  1x1ピクセルを用いた出力ビューへの点雲の単純投影は高速であり、利用可能な詳細を保持するが、背景点が前景画素間に漏れるにつれて、認識不能なレンダリングをもたらす。 U-Netの形での深い畳み込みモデルを用いて、これらの射影を現実的な結果に変換する。 また,不完全整合な地上真実画像を扱うための合成訓練データを生成する手法についても述べる。
  論文  参考訳（メタデータ） (2025-02-17T10:01:13Z)
• EVER: Exact Volumetric Ellipsoid Rendering for Real-time View Synthesis [72.53316783628803]
  実時間微分可能な発光専用ボリュームレンダリング法であるExact Volumetric Ellipsoid Rendering (EVER)を提案する。 3D Gaussian Splatting(3DGS)による最近の手法とは異なり、プリミティブベースの表現は正確なボリュームレンダリングを可能にする。 本手法は,3DGSよりもブレンディング問題の方が精度が高く,ビューレンダリングの追従作業も容易であることを示す。
  論文  参考訳（メタデータ） (2024-10-02T17:59:09Z)
• DeferredGS: Decoupled and Editable Gaussian Splatting with Deferred Shading [50.331929164207324]
  我々は,遅延シェーディングを用いたガウススプレイティング表現のデカップリングと編集を行うDedeerredGSを紹介する。 定性的かつ定量的な実験は、新しいビューおよび編集タスクにおけるDederredGSの優れた性能を示す。
  論文  参考訳（メタデータ） (2024-04-15T01:58:54Z)
• LAENeRF: Local Appearance Editing for Neural Radiance Fields [4.681790910494339]
  LAENeRFは、NeRFのフォトリアリスティックおよびノンフォトリアリスティックな外観編集のためのフレームワークである。 我々は、予想される線量から最終的な出力色へのマッピングを学習し、スタイルロスによって教師できる。 マッピングのために1光線当たりの1点を頼りにすることで、メモリ要件を制限し、高速な最適化を可能にします。
  論文  参考訳（メタデータ） (2023-12-15T16:23:42Z)
• Neural Fields meet Explicit Geometric Representation for Inverse Rendering of Urban Scenes [62.769186261245416]
  本稿では,大都市におけるシーン形状,空間変化材料,HDR照明を,任意の深さで描画したRGB画像の集合から共同で再構成できる新しい逆レンダリングフレームワークを提案する。 具体的には、第1の光線を考慮に入れ、第2の光線をモデリングするために、明示的なメッシュ(基礎となるニューラルネットワークから再構成)を用いて、キャストシャドウのような高次照明効果を発生させる。
  論文  参考訳（メタデータ） (2023-04-06T17:51:54Z)
• RecolorNeRF: Layer Decomposed Radiance Fields for Efficient Color Editing of 3D Scenes [21.284044381058575]
  本稿では,ニューラルラジアンスフィールドのための新しいユーザフレンドリーなカラー編集手法であるRecolorNeRFを提案する。 私たちのキーとなるアイデアは、シーンを純粋な色の層に分解し、パレットを形成することです。 効率的なパレットベースの編集をサポートするには、各レイヤの色を可能な限り表現する必要がある。
  論文  参考訳（メタデータ） (2023-01-19T09:18:06Z)
• PaletteNeRF: Palette-based Appearance Editing of Neural Radiance Fields [60.66412075837952]
  本稿では,3次元色分解に基づくニューラルラジアンスフィールド(NeRF)の出現編集手法であるPaletteNeRFを提案する。 提案手法は,各3次元点の出現を,パレットベースによる線形結合に分解する。 我々は、セマンティック・アウェアな外観編集のためのセマンティック機能を圧縮したフレームワークを拡張した。
  論文  参考訳（メタデータ） (2022-12-21T00:20:01Z)
• Hierarchical Vectorization for Portrait Images [12.32304366243904]
  本稿では,画像を自動的に3階層の階層表現に変換するベクトル化手法を提案する。 基層は、鮮やかな幾何学的特徴と低周波色を特徴付けるスパース拡散曲線からなる。 中層は、仕様のハイライトと影を大きく編集可能なポアソン領域(PR)にエンコードし、ユーザーは直接照明を調整できる。 トップレベルには、高周波残基のための2種類のピクセルサイズのPRと、ピンプや色素化などの細部が含まれている。
  論文  参考訳（メタデータ） (2022-05-24T07:58:41Z)
• DIB-R++: Learning to Predict Lighting and Material with a Hybrid Differentiable Renderer [78.91753256634453]
  そこで本研究では,単体画像から固有物体特性を推定する難題について,微分可能量を用いて検討する。 そこで本研究では、スペクトル化とレイトレーシングを組み合わせることで、これらの効果をサポートするハイブリッド微分可能なDIBR++を提案する。 より高度な物理ベースの微分可能値と比較すると、DIBR++はコンパクトで表現力のあるモデルであるため、高い性能を持つ。
  論文  参考訳（メタデータ） (2021-10-30T01:59:39Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。