論文の概要: Practical Wide-Angle Portraits Correction with Deep Structured Models
- arxiv url: http://arxiv.org/abs/2104.12464v1
- Date: Mon, 26 Apr 2021 10:47:35 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-27 14:34:58.060894
- Title: Practical Wide-Angle Portraits Correction with Deep Structured Models
- Title(参考訳): 深部構造モデルを用いた実用的広角画像補正
- Authors: Jing Tan, Shan Zhao, Pengfei Xiong, Jiangyu Liu, Haoqiang Fan,
Shuaicheng Liu
- Abstract要約: 本稿では,写真から視線歪みを取り除くための深層学習手法について紹介する。
入力として広角ポートレートが与えられると、LineNet、ShapeNet、トランジションモジュールからなるカスケードネットワークを構築します。
定量的評価には,ラインの整合性と面の整合性という2つの新しい指標を導入する。
- 参考スコア(独自算出の注目度): 17.62752136436382
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Wide-angle portraits often enjoy expanded views. However, they contain
perspective distortions, especially noticeable when capturing group portrait
photos, where the background is skewed and faces are stretched. This paper
introduces the first deep learning based approach to remove such artifacts from
freely-shot photos. Specifically, given a wide-angle portrait as input, we
build a cascaded network consisting of a LineNet, a ShapeNet, and a transition
module (TM), which corrects perspective distortions on the background, adapts
to the stereographic projection on facial regions, and achieves smooth
transitions between these two projections, accordingly. To train our network,
we build the first perspective portrait dataset with a large diversity in
identities, scenes and camera modules. For the quantitative evaluation, we
introduce two novel metrics, line consistency and face congruence. Compared to
the previous state-of-the-art approach, our method does not require camera
distortion parameters. We demonstrate that our approach significantly
outperforms the previous state-of-the-art approach both qualitatively and
quantitatively.
- Abstract(参考訳): 広角の肖像画はしばしば拡張された景色を楽しめる。
しかし、特に、背景が歪んで顔が伸びているグループ肖像画を撮影する際には、視線歪みが顕著である。
本稿では,このような人工物を自由撮影写真から取り除くための,最初のディープラーニング手法を提案する。
具体的には、入力として広角ポートレートが与えられた場合、LineNet、ShapeNet、トランジションモジュール(TM)で構成されるカスケードネットワークを構築し、背景の視点歪みを補正し、顔領域の立体投影に適応し、これら2つのプロジェクション間のスムーズな遷移を実現する。
ネットワークをトレーニングするために、アイデンティティ、シーン、カメラモジュールに大きな多様性を持つ最初の視点ポートレートデータセットを構築しました。
定量的評価には,ラインの整合性と面の整合性という2つの新しい指標を導入する。
従来の最先端手法と比較して,カメラの歪みパラメータは不要である。
我々は,従来の最先端手法よりも質的,定量的に優れていることを示す。
関連論文リスト
- Combining Generative and Geometry Priors for Wide-Angle Portrait Correction [54.448014761978975]
本稿では, 自然多様体として事前に生成顔をカプセル化して, 顔領域の補正を容易にすることを提案する。
非面の背景には顕著な中心対称性関係が存在するが、補正過程では研究されていない。
この幾何学は、修正過程全体を通して対称性を明示的に強制する新しい制約を導入する動機となる。
論文 参考訳(メタデータ) (2024-10-13T16:36:52Z) - Extreme Two-View Geometry From Object Poses with Diffusion Models [21.16779160086591]
オブジェクト先行のパワーを利用して、極端な視点変化に直面した2次元幾何学を正確に決定する。
実験では, 大局的な視点変化に対して, 突如として頑健さと弾力性を示した。
論文 参考訳(メタデータ) (2024-02-05T08:18:47Z) - RelPose++: Recovering 6D Poses from Sparse-view Observations [66.6922660401558]
スパースビュー画像集合(2-8画像)から6次元カメラポーズを推定する作業に対処する。
我々は,画像対上の相対回転よりも分布を推定するネットワークを学習するRelPoseフレームワークを構築した。
最終システムは,先行技術よりも6次元ポーズ予測を大幅に改善する。
論文 参考訳(メタデータ) (2023-05-08T17:59:58Z) - Parallax-Tolerant Unsupervised Deep Image Stitching [57.76737888499145]
本稿では,パララックス耐性の非教師あり深層画像縫合技術であるUDIS++を提案する。
まず,グローバルなホモグラフィから局所的な薄板スプライン運動への画像登録をモデル化するための,頑健で柔軟なワープを提案する。
本研究では, 縫合された画像をシームレスに合成し, シーム駆動合成マスクの教師なし学習を行うことを提案する。
論文 参考訳(メタデータ) (2023-02-16T10:40:55Z) - RecRecNet: Rectangling Rectified Wide-Angle Images by Thin-Plate Spline
Model and DoF-based Curriculum Learning [62.86400614141706]
我々はRecRecNet(Rectangling Rectification Network)という新しい学習モデルを提案する。
我々のモデルは、ソース構造をターゲット領域に柔軟にワープし、エンドツーエンドの非教師なし変形を実現する。
実験により, 定量評価と定性評価の両面において, 比較法よりも解法の方が優れていることが示された。
論文 参考訳(メタデータ) (2023-01-04T15:12:57Z) - Deep Rectangling for Image Stitching: A Learning Baseline [57.76737888499145]
我々は不規則な境界やシーンに大きな多様性を持つ最初の画像縫合整形データセットを構築した。
実験では、従来の方法よりも定量的にも質的にも優位性を示す。
論文 参考訳(メタデータ) (2022-03-08T03:34:10Z) - Learning Edge-Preserved Image Stitching from Large-Baseline Deep
Homography [32.28310831466225]
本稿では,大規模なベースライン深部ホログラフィモジュールとエッジ保存変形モジュールからなる画像縫合学習フレームワークを提案する。
本手法は既存の学習方法よりも優れ,最先端の従来の手法と競合する性能を示す。
論文 参考訳(メタデータ) (2020-12-11T08:43:30Z) - Wide-angle Image Rectification: A Survey [86.36118799330802]
広角画像は、基礎となるピンホールカメラモデルに反する歪みを含む。
これらの歪みを補正することを目的とした画像修正は、これらの問題を解決することができる。
本稿では、異なるアプローチで使用されるカメラモデルについて、詳細な説明と議論を行う。
次に,従来の幾何学に基づく画像修正手法と深層学習法の両方について検討する。
論文 参考訳(メタデータ) (2020-10-30T17:28:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。