論文の概要: SphereSR: 360{\deg} Image Super-Resolution with Arbitrary Projection via
Continuous Spherical Image Representation
- arxiv url: http://arxiv.org/abs/2112.06536v2
- Date: Tue, 14 Dec 2021 04:40:16 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-15 12:37:11.800573
- Title: SphereSR: 360{\deg} Image Super-Resolution with Arbitrary Projection via
Continuous Spherical Image Representation
- Title(参考訳): spheresr: 360{\deg} 連続球面画像表現による任意の投影による超解像
- Authors: Youngho Yoon, Inchul Chung, Lin Wang, and Kuk-Jin Yoon
- Abstract要約: LR 360デジメージから連続的な球面画像表現を生成するための新しいフレームワークを提案する。
具体的には、まず、イコサヘドロンに基づく球面データを表す特徴抽出モジュールを提案する。
次に、球面座標におけるRGB値を予測するために、球面局所暗黙画像関数(SLIIF)を提案する。
- 参考スコア(独自算出の注目度): 27.10716804733828
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The 360{\deg}imaging has recently gained great attention; however, its
angular resolution is relatively lower than that of a narrow field-of-view
(FOV) perspective image as it is captured by using fisheye lenses with the same
sensor size. Therefore, it is beneficial to super-resolve a 360{\deg}image.
Some attempts have been made but mostly considered the equirectangular
projection (ERP) as one of the way for 360{\deg}image representation despite of
latitude-dependent distortions. In that case, as the output high-resolution(HR)
image is always in the same ERP format as the low-resolution (LR) input,
another information loss may occur when transforming the HR image to other
projection types. In this paper, we propose SphereSR, a novel framework to
generate a continuous spherical image representation from an LR 360{\deg}image,
aiming at predicting the RGB values at given spherical coordinates for
super-resolution with an arbitrary 360{\deg}image projection. Specifically, we
first propose a feature extraction module that represents the spherical data
based on icosahedron and efficiently extracts features on the spherical
surface. We then propose a spherical local implicit image function (SLIIF) to
predict RGB values at the spherical coordinates. As such, SphereSR flexibly
reconstructs an HR image under an arbitrary projection type. Experiments on
various benchmark datasets show that our method significantly surpasses
existing methods.
- Abstract(参考訳): 360{\deg}イメージングは近年注目されているが、その角分解能は、同じセンサーサイズで魚眼レンズを用いて捉えた狭い視野(FOV)画像よりも比較的低い。
したがって、360{\deg}像を超解くことは有益である。
幾らかの試みがなされているが、主に等方射影(ERP)は緯度に依存した歪みにもかかわらず、360{\deg}像表現の方法の1つであると考えられている。
この場合、出力高分解能(HR)画像は、常に低分解能(LR)入力と同じERPフォーマットであるため、HR画像を他の投影型に変換する際に別の情報損失が発生する可能性がある。
本稿では,lr 360{\deg}画像から連続的な球面画像表現を生成するための新しいフレームワークであるspheresrを提案する。
具体的には,まず,イコサヘドロンに基づく球面データを表現し,球面上の特徴を効率的に抽出する特徴抽出モジュールを提案する。
次に球面座標におけるrgb値を予測する球面局所暗黙画像関数(sliif)を提案する。
これにより、SphereSRは任意の投影型の下でHR画像を柔軟に再構成する。
各種ベンチマークデータセットの実験により,本手法が既存手法を大幅に上回っていることが示された。
関連論文リスト
- GIR: 3D Gaussian Inverse Rendering for Relightable Scene Factorization [76.52007427483396]
GIRは3次元ガウス逆レンダリング法である。
本手法は,多視点画像から物体の材料特性,照明,形状を推定するために3次元ガウス法を用いる。
論文 参考訳(メタデータ) (2023-12-08T16:05:15Z) - Generative Multiplane Neural Radiance for 3D-Aware Image Generation [102.15322193381617]
本稿では,複数のターゲットビューに対して連続した3次元高解像度画像を効率よく生成する手法を提案する。
我々のGMNRモデルは、単一のV100上で17.6FPSの1024×1024ピクセルの3D認識画像を生成する。
論文 参考訳(メタデータ) (2023-04-03T17:41:20Z) - $PC^2$: Projection-Conditioned Point Cloud Diffusion for Single-Image 3D
Reconstruction [97.06927852165464]
単一のRGB画像から物体の3次元形状を再構築することは、コンピュータビジョンにおける長年の課題である。
条件付き偏光拡散プロセスによりスパース点雲を生成する単一像3次元再構成法を提案する。
論文 参考訳(メタデータ) (2023-02-21T13:37:07Z) - VoGE: A Differentiable Volume Renderer using Gaussian Ellipsoids for
Analysis-by-Synthesis [62.47221232706105]
本稿では,ガウス再構成カーネルをボリュームプリミティブとして利用するVoGEを提案する。
本稿では,VoGEを用いて効率よくレンダリングを行うために,体積密度集約と粗大な描画戦略に関する近似クローズフォーム解を提案する。
VoGEは、オブジェクトポーズ推定、形状/テクスチャフィッティング、推論など、様々な視覚タスクに適用された場合、SoTAより優れている。
論文 参考訳(メタデータ) (2022-05-30T19:52:11Z) - Field-of-View IoU for Object Detection in 360{\deg} Images [36.72543749626039]
本研究では,FoV-IoU(FoV-IoU)と360deg画像における物体検出のための360Augmentationという2つの基本手法を提案する。
FoV-IoUは2つの視野境界ボックスの交叉結合を球面画像で計算し、トレーニング、推論、評価に使用できる。
360Augmentationは、球面イメージをランダムに回転させ、球面から平面への投影によるバイアスを解決する360degオブジェクト検出タスクに特有のデータ拡張技術である。
論文 参考訳(メタデータ) (2022-02-07T14:01:59Z) - 360{\deg} Optical Flow using Tangent Images [18.146747748702513]
等角射影 (ERP) は、360度画像の保存、処理、視覚化において最も一般的なフォーマットである。
タンジェント画像に基づく360度光フロー法を提案する。
論文 参考訳(メタデータ) (2021-12-28T23:50:46Z) - Neural Radiance Fields Approach to Deep Multi-View Photometric Stereo [103.08512487830669]
多視点測光ステレオ問題(MVPS)に対する現代的な解法を提案する。
我々は、光度ステレオ(PS)画像形成モデルを用いて表面配向を取得し、それを多視点のニューラルラディアンス場表現とブレンドして物体の表面形状を復元する。
本手法は,多視点画像のニューラルレンダリングを行い,深部光度ステレオネットワークによって推定される表面の正規性を活用している。
論文 参考訳(メタデータ) (2021-10-11T20:20:03Z) - Applying VertexShuffle Toward 360-Degree Video Super-Resolution on
Focused-Icosahedral-Mesh [10.29596292902288]
We exploited Focused Icosahedral Mesh to represent a small area and construct matrices to rotation spherical content to the focus mesh area。
また,性能と効率を両立させる新しいVertexShuffle演算を提案する。
提案する球面超解像モデルでは,性能と推定時間の両方において大きなメリットが得られている。
論文 参考訳(メタデータ) (2021-06-21T16:53:57Z) - Extreme Rotation Estimation using Dense Correlation Volumes [73.35119461422153]
本稿では,RGB画像対の相対的な3次元回転を極端に推定する手法を提案する。
画像が重なり合わなくても、それらの幾何学的関係に関して豊富な隠れた手がかりがあるかもしれないと観察する。
本稿では,2つの入力画像間の全ての点を比較することで,そのような暗黙の手がかりを自動的に学習できるネットワーク設計を提案する。
論文 参考訳(メタデータ) (2021-04-28T02:00:04Z) - A Fixation-based 360{\deg} Benchmark Dataset for Salient Object
Detection [21.314578493964333]
パノラマコンテンツ中の固定予測(FP)は、仮想現実(VR)アプリケーションの普及傾向とともに広く研究されている。
静止物体検出(SOD)は、実際のシーンを表すデータセットが欠如しているため、360度画像ではめったに探索されていない。
論文 参考訳(メタデータ) (2020-01-22T11:16:39Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。