論文の概要: MambaPainter: Neural Stroke-Based Rendering in a Single Step
- arxiv url: http://arxiv.org/abs/2410.12524v1
- Date: Wed, 16 Oct 2024 13:02:45 GMT
- ステータス: 翻訳完了
- システム内更新日: 2024-10-17 13:42:12.045029
- Title: MambaPainter: Neural Stroke-Based Rendering in a Single Step
- Title(参考訳): MambaPainter: 単一ステップでのニューラルストロークベースのレンダリング
- Authors: Tomoya Sawada, Marie Katsurai,
- Abstract要約: ストロークに基づくレンダリングは、ブラシストロークシーケンスを予測して入力画像を油絵スタイルに再構築することを目的としている。
単一推論ステップで100以上のブラシストロークのシーケンスを予測できるMambaPainterを提案する。
- 参考スコア(独自算出の注目度): 3.18005110016691
- License:
- Abstract: Stroke-based rendering aims to reconstruct an input image into an oil painting style by predicting brush stroke sequences. Conventional methods perform this prediction stroke-by-stroke or require multiple inference steps due to the limitations of a predictable number of strokes. This procedure leads to inefficient translation speed, limiting their practicality. In this study, we propose MambaPainter, capable of predicting a sequence of over 100 brush strokes in a single inference step, resulting in rapid translation. We achieve this sequence prediction by incorporating the selective state-space model. Additionally, we introduce a simple extension to patch-based rendering, which we use to translate high-resolution images, improving the visual quality with a minimal increase in computational cost. Experimental results demonstrate that MambaPainter can efficiently translate inputs to oil painting-style images compared to state-of-the-art methods. The codes are available at https://github.com/STomoya/MambaPainter.
- Abstract(参考訳): ストロークに基づくレンダリングは、ブラシストロークシーケンスを予測して入力画像を油絵スタイルに再構築することを目的としている。
従来の手法では、予測可能なストローク数の制限により、この予測ストローク・バイ・ストロークを実行するか、複数の推論ステップを必要とする。
この手順は非効率な翻訳速度をもたらし、実用性を制限する。
本研究では,1回の推論ステップで100以上のブラシストロークのシーケンスを予測できるMambaPainterを提案する。
我々は、選択状態空間モデルを組み込むことで、このシーケンス予測を実現する。
さらに,高解像度画像の変換に用いたパッチベースレンダリングの簡単な拡張も導入し,計算コストの最小化による視覚的品質の向上を実現した。
実験結果から,MambaPainterは油彩画型画像への入力を最先端の手法と比較して効率よく翻訳できることがわかった。
コードはhttps://github.com/STomoya/MambaPainter.comで入手できる。
関連論文リスト
- AttentionPainter: An Efficient and Adaptive Stroke Predictor for Scene Painting [82.54770866332456]
ストロークベースのレンダリング(SBR)は、入力画像をパラメータ化されたストロークのシーケンスに分解することを目的としており、入力画像に似た絵に描画することができる。
単一ステップのニューラルペイントのための効率よく適応的なモデルであるAttentionPainterを提案する。
論文 参考訳(メタデータ) (2024-10-21T18:36:45Z) - Stroke-based Neural Painting and Stylization with Dynamically Predicted
Painting Region [66.75826549444909]
ストロークベースのレンダリングは、ストロークのセットで画像を再現することを目的としている。
本研究では,現在のキャンバスに基づいて絵画領域を予測する合成ニューラルネットワークを提案する。
我々は、新しい微分可能な距離変換損失を伴って、ストロークベースのスタイル転送に拡張する。
論文 参考訳(メタデータ) (2023-09-07T06:27:39Z) - Im2Oil: Stroke-Based Oil Painting Rendering with Linearly Controllable
Fineness Via Adaptive Sampling [10.440767522370688]
本稿では,画像から鮮明な油絵へ変換する新しいストロークベースレンダリング法を提案する。
ユーザーの意見テストでは、他の方法よりも油絵の方が好まれていることが示されています。
論文 参考訳(メタデータ) (2022-09-27T07:41:04Z) - Cylin-Painting: Seamless {360\textdegree} Panoramic Image Outpainting
and Beyond [136.18504104345453]
塗り絵と塗り絵の間に有意義な協調関係を持つキリン塗り絵の枠組みを提示する。
提案アルゴリズムは、オブジェクト検出、深さ推定、画像超解像などの他のパノラマ視覚タスクに効果的に拡張できる。
論文 参考訳(メタデータ) (2022-04-18T21:18:49Z) - Paint Transformer: Feed Forward Neural Painting with Stroke Prediction [36.457204758975074]
我々は,フィードフォワードネットワークを用いたストロークセットのパラメータを予測するために,Paint Transformerと呼ばれる新しいトランスフォーマーベースのフレームワークを提案する。
このようにして、我々のモデルは並列に一組のストロークを生成でき、ほぼリアルタイムでサイズ512 * 512の最終的な絵を得ることができる。
実験により,本手法はトレーニングコストと推論コストの低減により,従来の手法よりも優れた塗装性能が得られることが示された。
論文 参考訳(メタデータ) (2021-08-09T04:18:58Z) - In&Out : Diverse Image Outpainting via GAN Inversion [89.84841983778672]
image outpaintingは、利用可能なコンテンツを超えて、入力画像の意味的に一貫した拡張を求める。
本研究では、生成的対向ネットワークの反転の観点から問題を定式化する。
私達の発電機はイメージの彼らの共同潜入コードそして個々の位置で調節されるマイクロ パッチをレンダリングします。
論文 参考訳(メタデータ) (2021-04-01T17:59:10Z) - Stylized Neural Painting [0.0]
本稿では,鮮明でリアルな絵画を制御可能なスタイルで生成する画像から絵画への翻訳手法を提案する。
実験により,本手法で作成した絵画は,グローバルな外観と局所的なテクスチャの両方において高い忠実度を有することが示された。
論文 参考訳(メタデータ) (2020-11-16T17:24:21Z) - Powers of layers for image-to-image translation [60.5529622990682]
本稿では,未ペア画像から画像への変換タスクに対処するシンプルなアーキテクチャを提案する。
固定重み付きイメージオートエンコーダアーキテクチャから始める。
各タスクに対して、潜在空間で動作している残留ブロックを学習し、ターゲット領域に到達するまで繰り返し呼び出される。
論文 参考訳(メタデータ) (2020-08-13T09:02:17Z) - High-Resolution Image Inpainting with Iterative Confidence Feedback and
Guided Upsampling [122.06593036862611]
既存の画像塗装法は、実アプリケーションで大きな穴を扱う際に、しばしばアーティファクトを生成する。
本稿では,フィードバック機構を備えた反復インペイント手法を提案する。
実験により,本手法は定量評価と定性評価の両方において既存手法よりも有意に優れていた。
論文 参考訳(メタデータ) (2020-05-24T13:23:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。