論文の概要: Spatially Varying Exposure with 2-by-2 Multiplexing: Optimality and
Universality
- arxiv url: http://arxiv.org/abs/2306.17367v1
- Date: Fri, 30 Jun 2023 02:08:25 GMT
- ステータス: 処理完了
- システム内更新日: 2023-07-03 13:43:07.983588
- Title: Spatially Varying Exposure with 2-by-2 Multiplexing: Optimality and
Universality
- Title(参考訳): 多重化による空間変動露光:最適性と普遍性
- Authors: Xiangyu Qu, Yiheng Chi, Stanley H. Chan
- Abstract要約: 本研究では,空間変動露光リスク(SVE-Risk)と呼ばれる新たな概念を提案する。
多重化パターンが与えられた場合、入力/出力-参照信号-雑音比に基づく従来の最適度基準が欠陥となる可能性があることを示す。
本稿では,デザインの普遍性パターンを画像再構成アルゴリズムから切り離すことができる設計観察について報告する。
- 参考スコア(独自算出の注目度): 15.525314212209564
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The advancement of new digital image sensors has enabled the design of
exposure multiplexing schemes where a single image capture can have multiple
exposures and conversion gains in an interlaced format, similar to that of a
Bayer color filter array. In this paper, we ask the question of how to design
such multiplexing schemes for adaptive high-dynamic range (HDR) imaging where
the multiplexing scheme can be updated according to the scenes. We present two
new findings.
(i) We address the problem of design optimality. We show that given a
multiplex pattern, the conventional optimality criteria based on the
input/output-referred signal-to-noise ratio (SNR) of the independently measured
pixels can lead to flawed decisions because it cannot encapsulate the location
of the saturated pixels. We overcome the issue by proposing a new concept known
as the spatially varying exposure risk (SVE-Risk) which is a pseudo-idealistic
quantification of the amount of recoverable pixels. We present an efficient
enumeration algorithm to select the optimal multiplex patterns.
(ii) We report a design universality observation that the design of the
multiplex pattern can be decoupled from the image reconstruction algorithm.
This is a significant departure from the recent literature that the multiplex
pattern should be jointly optimized with the reconstruction algorithm. Our
finding suggests that in the context of exposure multiplexing, an end-to-end
training may not be necessary.
- Abstract(参考訳): 新しいデジタルイメージセンサの進歩により、単一のイメージキャプチャが複数の露光と変換をインターレース形式で得ることができる露出多重化スキームの設計が可能となった。
本稿では,シーンに応じて多重化方式を更新可能な適応型高ダイナミックレンジ(HDR)画像に対して,このような多重化方式を設計する方法を問う。
我々は2つの新しい発見を示す。
(i)設計の最適性の問題に対処します。
本研究では,各画素の入力/出力-参照信号-雑音比(SNR)に基づく従来の最適条件である多重パターンが,飽和画素の位置をカプセル化できないという欠点を生じさせることを示す。
本研究では,空間的に変化する露光リスク (SVE-Risk) と呼ばれる新たな概念を提案することでこの問題を克服する。
最適な多重化パターンを選択するための効率的な列挙アルゴリズムを提案する。
(ii)画像再構成アルゴリズムから多重化パターンの設計を分離できるという設計普遍性観察を報告する。
これは、多重化パターンを再構成アルゴリズムと共同で最適化すべきという最近の文献から大きく逸脱している。
以上より,露出多重化の文脈では,エンドツーエンドのトレーニングは不要である可能性が示唆された。
関連論文リスト
- Video Frame Interpolation with Many-to-many Splatting and Spatial
Selective Refinement [83.60486465697318]
本稿では,フレームを効率的に補間するM2Mスプレイティングフレームワークを提案する。
入力フレームペアごとに、M2Mは任意の数のフレーム間を補間する際の計算オーバーヘッドが極小である。
フレキシブルな空間選択リファインメント(Spatial Selective Refinement)コンポーネントを導入して,M2M++フレームワークを拡張した。
論文 参考訳(メタデータ) (2023-10-29T09:09:32Z) - Aperture Diffraction for Compact Snapshot Spectral Imaging [27.321750056840706]
我々は、Aperture Diffraction Imaging Spectrometer (ADIS) という、コンパクトで費用効率の良いスナップショット分光画像システムを紹介した。
モザイクフィルタセンサ上の離散符号化位置にオブジェクト空間の各点を多重化する新しい光学設計を導入する。
回折変性を強く知覚するカスケードシフトシャッフルスペクトル変換器(CSST)は、空間制約の逆問題を解決するために設計されている。
論文 参考訳(メタデータ) (2023-09-27T16:48:46Z) - Effective Invertible Arbitrary Image Rescaling [77.46732646918936]
Invertible Neural Networks (INN)は、ダウンスケーリングとアップスケーリングのサイクルを共同で最適化することにより、アップスケーリングの精度を大幅に向上させることができる。
本研究の1つのモデルのみをトレーニングすることにより、任意の画像再スケーリングを実現するために、単純で効果的な非可逆的再スケーリングネットワーク(IARN)を提案する。
LR出力の知覚品質を損なうことなく、双方向任意再スケーリングにおいて最先端(SOTA)性能を実現する。
論文 参考訳(メタデータ) (2022-09-26T22:22:30Z) - Enhancing Image Rescaling using Dual Latent Variables in Invertible
Neural Network [42.18106162158025]
画像ダウンスケーリングプロセスのバリエーションをモデル化するために、新しいダウンスケーリング潜在変数が導入された。
これにより、ダウンスケールのLR画像の画質を犠牲にすることなく、画像のアップスケーリング精度を一貫して向上させることができる。
また、画像隠蔽のような画像復元アプリケーションのための他の INN ベースのモデルの拡張にも有効であることが示されている。
論文 参考訳(メタデータ) (2022-07-24T23:12:51Z) - Image Super-Resolution Using T-Tetromino Pixels [3.8233569758620054]
シングルイメージの超解像技術はアップスケーリングに応用できる。
テトロミノ形状の画素を用いた新しいビンニングの概念を提案する。
我々はPSNR, SSIM, 画像の画質を従来の単一画像の超解像と比較し, 優れた画質を実現する。
論文 参考訳(メタデータ) (2021-11-17T10:11:03Z) - Time-Multiplexed Coded Aperture Imaging: Learned Coded Aperture and
Pixel Exposures for Compressive Imaging Systems [56.154190098338965]
提案した時間多重符号化開口(TMCA)をエンドツーエンドで最適化できることを示した。
tmcaは圧縮光野イメージングとハイパースペクトルイメージングの2つの異なる応用において、より良いコード化されたスナップショットを誘導する。
この凝固法は、最先端の圧縮画像システムよりも4dB以上性能が高い。
論文 参考訳(メタデータ) (2021-04-06T22:42:34Z) - Generating Diverse Structure for Image Inpainting With Hierarchical
VQ-VAE [74.29384873537587]
本稿では,異なる構造を持つ複数の粗い結果を第1段階で生成し,第2段階ではテクスチャを増補して各粗い結果を別々に洗練する,多彩な塗布用2段階モデルを提案する。
CelebA-HQ, Places2, ImageNetデータセットによる実験結果から,本手法は塗布ソリューションの多様性を向上するだけでなく,生成した複数の画像の視覚的品質も向上することが示された。
論文 参考訳(メタデータ) (2021-03-18T05:10:49Z) - Adversarial Generation of Continuous Images [31.92891885615843]
本稿では,INRに基づく画像デコーダ構築のための2つの新しいアーキテクチャ手法を提案する。
私たちは、最先端の連続画像GANを構築するためにそれらを使用します。
提案したINR-GANアーキテクチャは連続画像生成装置の性能を数倍改善する。
論文 参考訳(メタデータ) (2020-11-24T11:06:40Z) - Deep Variational Network Toward Blind Image Restoration [60.45350399661175]
ブラインド画像復元はコンピュータビジョンでは一般的だが難しい問題である。
両利点を両立させることを目的として,新しいブラインド画像復元手法を提案する。
画像デノイングと超解像という2つの典型的なブラインド赤外線タスクの実験により,提案手法が現状よりも優れた性能を達成できることが実証された。
論文 参考訳(メタデータ) (2020-08-25T03:30:53Z) - Single-Image HDR Reconstruction by Learning to Reverse the Camera
Pipeline [100.5353614588565]
本稿では,LDR画像形成パイプラインの領域知識をモデルに組み込むことを提案する。
我々は,HDRto-LDR画像形成パイプラインを(1)ダイナミックレンジクリッピング,(2)カメラ応答関数からの非線形マッピング,(3)量子化としてモデル化する。
提案手法は,最先端の単一画像HDR再構成アルゴリズムに対して良好に動作することを示す。
論文 参考訳(メタデータ) (2020-04-02T17:59:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。