論文の概要: Time-multiplexed Neural Holography: A flexible framework for holographic
near-eye displays with fast heavily-quantized spatial light modulators
- arxiv url: http://arxiv.org/abs/2205.02367v1
- Date: Thu, 5 May 2022 00:03:50 GMT
- ステータス: 処理完了
- システム内更新日: 2022-05-07 07:09:52.532749
- Title: Time-multiplexed Neural Holography: A flexible framework for holographic
near-eye displays with fast heavily-quantized spatial light modulators
- Title(参考訳): time-multiplexed neural holography:高速高量子化空間光変調器を用いたホログラフィック近眼ディスプレイのための柔軟な枠組み
- Authors: Suyeon Choi, Manu Gopakumar, Yifan (Evan) Peng, Jonghyun Kim, Matthew
O'Toole, Gordon Wetzstein
- Abstract要約: ホログラフィックの近眼ディスプレイは、バーチャルおよび拡張現実システムに前例のない機能を提供する。
このようなホログラム近眼ディスプレイのカメラ校正波伝搬モデルの進歩を報告する。
我々のフレームワークは,2Dおよび2.5D RGBDイメージ,3D焦点スタック,4D光フィールドなど,さまざまなタイプのコンテンツで実行時の監視を支援するために柔軟である。
- 参考スコア(独自算出の注目度): 44.73608798155336
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Holographic near-eye displays offer unprecedented capabilities for virtual
and augmented reality systems, including perceptually important focus cues.
Although artificial intelligence--driven algorithms for computer-generated
holography (CGH) have recently made much progress in improving the image
quality and synthesis efficiency of holograms, these algorithms are not
directly applicable to emerging phase-only spatial light modulators (SLM) that
are extremely fast but offer phase control with very limited precision. The
speed of these SLMs offers time multiplexing capabilities, essentially enabling
partially-coherent holographic display modes. Here we report advances in
camera-calibrated wave propagation models for these types of holographic
near-eye displays and we develop a CGH framework that robustly optimizes the
heavily quantized phase patterns of fast SLMs. Our framework is flexible in
supporting runtime supervision with different types of content, including 2D
and 2.5D RGBD images, 3D focal stacks, and 4D light fields. Using our
framework, we demonstrate state-of-the-art results for all of these scenarios
in simulation and experiment.
- Abstract(参考訳): ホログラフィックの近眼ディスプレイは、知覚的に重要なフォーカスキューを含む、バーチャルおよび拡張現実システムに前例のない機能を提供する。
コンピュータ生成ホログラフィー(CGH)のための人工知能駆動アルゴリズムは、最近ホログラムの画質と合成効率の改善に大きく進歩しているが、これらのアルゴリズムは、非常に高速であるが、非常に精度の低い位相制御を提供する新興位相専用空間光変調器(SLM)には直接適用できない。
これらのSLMの速度は時間多重化機能を提供し、本質的には部分的にコヒーレントなホログラフィック表示モードを可能にする。
本稿では,このようなホログラフィック近眼ディスプレイのカメラ校正波伝搬モデルの進歩を報告し,高速SLMの高量子化位相パターンを強力に最適化するCGHフレームワークを開発した。
本フレームワークは,2次元および2.5次元RGBD画像,3次元焦点スタック,4次元光フィールドなど,さまざまなタイプのコンテンツによる実行時の監視を支援する。
このフレームワークを用いて,シミュレーションおよび実験において,これらのシナリオの最先端結果を示す。
関連論文リスト
- SC-GS: Sparse-Controlled Gaussian Splatting for Editable Dynamic Scenes [59.23385953161328]
動的シーンのための新しいビュー合成は、コンピュータビジョンとグラフィックスにおいて依然として難しい問題である。
本稿では,動的シーンの動作と外観を疎制御点と高密度ガウスに明示的に分解する新しい表現を提案する。
提案手法は,高忠実度な外観を維持しつつ,ユーザ制御のモーション編集を可能にする。
論文 参考訳(メタデータ) (2023-12-04T11:57:14Z) - Single-shot Tomography of Discrete Dynamic Objects [1.1407697960152927]
ダイナミックトモグラフィーにおける高分解能時間像の再構成法を提案する。
本研究の意義は、断層撮影における動的過程の可視化と解析の改善にまで及んでいる。
論文 参考訳(メタデータ) (2023-11-09T10:52:02Z) - Embracing Compact and Robust Architectures for Multi-Exposure Image
Fusion [50.598654017728045]
本稿では,堅牢なマルチ露光画像融合のための自己アライメントとディテールリプレクションモジュールを含む探索型パラダイムを提案する。
シーンリライティングと変形可能な畳み込みを利用して、カメラの動きに拘わらず、画像を正確に調整することができる。
我々は、様々な競争方式と比較して最先端の性能を実現し、一般的なシナリオと不整合シナリオに対するPSNRの4.02%と29.34%の改善を実現した。
論文 参考訳(メタデータ) (2023-05-20T17:01:52Z) - TiDy-PSFs: Computational Imaging with Time-Averaged Dynamic
Point-Spread-Functions [10.098114696565865]
ポイント・スプレッド・ファンクション(PSF)技術は、カスタムフェーズマスクを光学系に統合し、付加情報をキャプチャー画像にエンコードする強力な計算イメージング技術である。
空間光変調器(SLM)技術の最近の進歩に触発されて、この論文は自然な疑問に答えている。
シミュレーションでは、時間平均の動的(TiDy)位相マスクにより、単分子深度推定と拡大深度撮像性能が大幅に向上できることが示される。
論文 参考訳(メタデータ) (2023-03-30T17:51:07Z) - A Portable Multiscopic Camera for Novel View and Time Synthesis in
Dynamic Scenes [42.00094186447837]
ダイナミックなシーンにおける新しいビューと時間合成のための専用モデルを備えた携帯型マルチスコープカメラシステムを提案する。
私たちのゴールは、ポータブルなマルチスコープカメラを使って、いつでもあらゆる視点から、ダイナミックなシーンの高品質な画像をレンダリングすることです。
論文 参考訳(メタデータ) (2022-08-30T17:53:17Z) - Physics to the Rescue: Deep Non-line-of-sight Reconstruction for
High-speed Imaging [13.271762773872476]
本稿では,高品位かつ堅牢なNLOS再構成のためのニューラルネットワークに,波動伝搬とボリュームレンダリングの相補的な物理を組み込んだ新しいディープモデルを提案する。
本手法は, 実測値と実測値の両方に基づいて, 従来の物理・学習手法よりも優れていた。
論文 参考訳(メタデータ) (2022-05-03T02:47:02Z) - Neural \'{E}tendue Expander for Ultra-Wide-Angle High-Fidelity
Holographic Display [51.399291206537384]
現代のホログラフィックディスプレイは、表示領域と回折光の最大固体角度の積である低い「エンテンダ」を有する。
自然画像データセットから学習したニューラルな「固有拡大器」を提案する。
ニューラルネットワーク拡張器を用いて,64$times$ 'etendue expansion of natural image in full color, and expand the FOV by a magnitude of horizontal and vertically。
論文 参考訳(メタデータ) (2021-09-16T17:21:52Z) - Learned holographic light transport [2.642698101441705]
ホログラフィーアルゴリズムはしばしば物理ホログラフィーディスプレイの結果と一致するシミュレーションで不足する。
我々の研究はホログラフィックディスプレイのホログラフィック光輸送を学習することで、このミスマッチに対処する。
本手法はホログラフィックディスプレイのシミュレーション精度と画質を劇的に向上させることができる。
論文 参考訳(メタデータ) (2021-08-01T12:05:33Z) - TimeLens: Event-based Video Frame Interpolation [54.28139783383213]
本稿では,合成法とフロー法の両方の利点を生かした,等価寄与法であるTime Lensを紹介する。
最先端のフレームベースおよびイベントベース手法よりもPSNRが最大5.21dB向上したことを示す。
論文 参考訳(メタデータ) (2021-06-14T10:33:47Z) - Crowdsampling the Plenoptic Function [56.10020793913216]
このようなデータから時間変動照明下での新しいビュー合成手法を提案する。
本稿では,新しいDeepMPI表現について紹介する。
本手法は従来のMPI法と同等のパララックスとビュー依存効果を合成し, 反射率の変化と光の時間変化を同時に補間する。
論文 参考訳(メタデータ) (2020-07-30T02:52:10Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。