論文の概要: SphereSR
- arxiv url: http://arxiv.org/abs/2112.06536v1
- Date: Mon, 13 Dec 2021 10:16:51 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-14 17:24:06.569495
- Title: SphereSR
- Title(参考訳): SphereSR
- Authors: Youngho Yoon, Inchul Chung, Lin Wang, and Kuk-Jin Yoon
- Abstract要約: LR360画像から連続的な球面画像表現を生成するための新しいフレームワークを提案する。
具体的には,イコサヘドロンに基づく球面データを表す特徴抽出モジュールを最初に提案する。
次に、球面座標におけるRGB値を予測するために、球面局所暗黙画像関数(SLIIF)を提案する。
- 参考スコア(独自算出の注目度): 27.10716804733828
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The 360 imaging has recently gained great attention; however, its angular
resolution is relatively lower than that of a narrow field-of-view (FOV)
perspective image as it is captured by using fisheye lenses with the same
sensor size. Therefore, it is beneficial to super-resolve a 360 image. Some
attempts have been made but mostly considered the equirectangular projection
(ERP) as one of the way for 360 image representation despite of
latitude-dependent distortions.In that case, as the output high-resolution(HR)
image is always in the same ERP format as the low-resolution (LR) input,
another information loss may occur when transforming the HR image to other
projection types.In this paper, we propose SphereSR, a novel framework to
generate a continuous spherical image representation from an LR 360 image,
aiming at predicting the RGB values at given spherical coordinates for
super-resolution with an arbitrary 360 image projection. Specifically, we first
pro-pose a feature extraction module that represents the spherical data based
on icosahedron and efficiently extracts features on the spherical surface. We
then propose a spherical local implicit image function (SLIIF) to predict RGB
values at the spherical coordinates. As such, SphereSR flexibly re-constructs
an HR image under an arbitrary projection type.Experiments on various benchmark
datasets show that our method significantly surpasses existing methods.
- Abstract(参考訳): 360 画像は近年注目されているが、その角分解能は、同じセンサーサイズで魚眼レンズを用いて捉えられるため、視野の狭い(FOV)視野像よりも比較的低い。
したがって、360度画像の超解像は有益である。
Some attempts have been made but mostly considered the equirectangular projection (ERP) as one of the way for 360 image representation despite of latitude-dependent distortions.In that case, as the output high-resolution(HR) image is always in the same ERP format as the low-resolution (LR) input, another information loss may occur when transforming the HR image to other projection types.In this paper, we propose SphereSR, a novel framework to generate a continuous spherical image representation from an LR 360 image, aiming at predicting the RGB values at given spherical coordinates for super-resolution with an arbitrary 360 image projection.
具体的には,まず,イコサヘドロンに基づく球面データを表現し,球面上の特徴を効率的に抽出する特徴抽出モジュールを提案する。
次に球面座標におけるrgb値を予測する球面局所暗黙画像関数(sliif)を提案する。
そこで,SphereSR は任意の投影型の下で HR 画像を柔軟に再構成する。
関連論文リスト
- GPS-Gaussian+: Generalizable Pixel-wise 3D Gaussian Splatting for Real-Time Human-Scene Rendering from Sparse Views [67.34073368933814]
スパースビューカメラ設定下での高解像度画像レンダリングのための一般化可能なガウススプラッティング手法を提案する。
我々は,人間のみのデータや人景データに基づいてガウスパラメータ回帰モジュールをトレーニングし,深度推定モジュールと共同で2次元パラメータマップを3次元空間に引き上げる。
いくつかのデータセットに対する実験により、我々の手法はレンダリング速度を超越しながら最先端の手法より優れていることが示された。
論文 参考訳(メタデータ) (2024-11-18T08:18:44Z) - ODGS: 3D Scene Reconstruction from Omnidirectional Images with 3D Gaussian Splattings [48.72040500647568]
幾何的解釈を用いた全方位画像の新規化パイプラインであるODGSについて述べる。
パイプライン全体が並列化され、最適化が達成され、NeRFベースの手法よりも100倍高速になる。
その結果、ODGSは大規模な3Dシーンを再構築しても、細部を効果的に復元できることがわかった。
論文 参考訳(メタデータ) (2024-10-28T02:45:13Z) - Revisiting 360 Depth Estimation with PanoGabor: A New Fusion Perspective [33.85582959047852]
本稿では,これらの課題に対処するため,指向性歪みを考慮したGabor Fusionフレームワーク(PGFuse)を提案する。
再帰的歪みに対処するために、線形緯度対応の歪み表現法を設計し、カスタマイズされた歪み対応ガボルフィルタを生成する。
ガボル変換の配向感度を考慮すると、この感度を安定させるために球面勾配制約を導入する。
論文 参考訳(メタデータ) (2024-08-29T02:58:35Z) - Generative Multiplane Neural Radiance for 3D-Aware Image Generation [102.15322193381617]
本稿では,複数のターゲットビューに対して連続した3次元高解像度画像を効率よく生成する手法を提案する。
我々のGMNRモデルは、単一のV100上で17.6FPSの1024×1024ピクセルの3D認識画像を生成する。
論文 参考訳(メタデータ) (2023-04-03T17:41:20Z) - $PC^2$: Projection-Conditioned Point Cloud Diffusion for Single-Image 3D
Reconstruction [97.06927852165464]
単一のRGB画像から物体の3次元形状を再構築することは、コンピュータビジョンにおける長年の課題である。
条件付き偏光拡散プロセスによりスパース点雲を生成する単一像3次元再構成法を提案する。
論文 参考訳(メタデータ) (2023-02-21T13:37:07Z) - VoGE: A Differentiable Volume Renderer using Gaussian Ellipsoids for
Analysis-by-Synthesis [62.47221232706105]
本稿では,ガウス再構成カーネルをボリュームプリミティブとして利用するVoGEを提案する。
本稿では,VoGEを用いて効率よくレンダリングを行うために,体積密度集約と粗大な描画戦略に関する近似クローズフォーム解を提案する。
VoGEは、オブジェクトポーズ推定、形状/テクスチャフィッティング、推論など、様々な視覚タスクに適用された場合、SoTAより優れている。
論文 参考訳(メタデータ) (2022-05-30T19:52:11Z) - Field-of-View IoU for Object Detection in 360{\deg} Images [36.72543749626039]
本研究では,FoV-IoU(FoV-IoU)と360deg画像における物体検出のための360Augmentationという2つの基本手法を提案する。
FoV-IoUは2つの視野境界ボックスの交叉結合を球面画像で計算し、トレーニング、推論、評価に使用できる。
360Augmentationは、球面イメージをランダムに回転させ、球面から平面への投影によるバイアスを解決する360degオブジェクト検出タスクに特有のデータ拡張技術である。
論文 参考訳(メタデータ) (2022-02-07T14:01:59Z) - 360{\deg} Optical Flow using Tangent Images [18.146747748702513]
等角射影 (ERP) は、360度画像の保存、処理、視覚化において最も一般的なフォーマットである。
タンジェント画像に基づく360度光フロー法を提案する。
論文 参考訳(メタデータ) (2021-12-28T23:50:46Z) - Applying VertexShuffle Toward 360-Degree Video Super-Resolution on
Focused-Icosahedral-Mesh [10.29596292902288]
We exploited Focused Icosahedral Mesh to represent a small area and construct matrices to rotation spherical content to the focus mesh area。
また,性能と効率を両立させる新しいVertexShuffle演算を提案する。
提案する球面超解像モデルでは,性能と推定時間の両方において大きなメリットが得られている。
論文 参考訳(メタデータ) (2021-06-21T16:53:57Z) - Extreme Rotation Estimation using Dense Correlation Volumes [73.35119461422153]
本稿では,RGB画像対の相対的な3次元回転を極端に推定する手法を提案する。
画像が重なり合わなくても、それらの幾何学的関係に関して豊富な隠れた手がかりがあるかもしれないと観察する。
本稿では,2つの入力画像間の全ての点を比較することで,そのような暗黙の手がかりを自動的に学習できるネットワーク設計を提案する。
論文 参考訳(メタデータ) (2021-04-28T02:00:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。