論文の概要: Time-multiplexed Neural Holography: A flexible framework for holographic
near-eye displays with fast heavily-quantized spatial light modulators
- arxiv url: http://arxiv.org/abs/2205.02367v1
- Date: Thu, 5 May 2022 00:03:50 GMT
- ステータス: 処理完了
- システム内更新日: 2022-05-07 07:09:52.532749
- Title: Time-multiplexed Neural Holography: A flexible framework for holographic
near-eye displays with fast heavily-quantized spatial light modulators
- Title（参考訳）: time-multiplexed neural holography:高速高量子化空間光変調器を用いたホログラフィック近眼ディスプレイのための柔軟な枠組み
- Authors: Suyeon Choi, Manu Gopakumar, Yifan (Evan) Peng, Jonghyun Kim, Matthew
O'Toole, Gordon Wetzstein
- Abstract要約: ホログラフィックの近眼ディスプレイは、バーチャルおよび拡張現実システムに前例のない機能を提供する。
このようなホログラム近眼ディスプレイのカメラ校正波伝搬モデルの進歩を報告する。
我々のフレームワークは,2Dおよび2.5D RGBDイメージ,3D焦点スタック,4D光フィールドなど,さまざまなタイプのコンテンツで実行時の監視を支援するために柔軟である。
- 参考スコア（独自算出の注目度）: 44.73608798155336
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Holographic near-eye displays offer unprecedented capabilities for virtual
and augmented reality systems, including perceptually important focus cues.
Although artificial intelligence--driven algorithms for computer-generated
holography (CGH) have recently made much progress in improving the image
quality and synthesis efficiency of holograms, these algorithms are not
directly applicable to emerging phase-only spatial light modulators (SLM) that
are extremely fast but offer phase control with very limited precision. The
speed of these SLMs offers time multiplexing capabilities, essentially enabling
partially-coherent holographic display modes. Here we report advances in
camera-calibrated wave propagation models for these types of holographic
near-eye displays and we develop a CGH framework that robustly optimizes the
heavily quantized phase patterns of fast SLMs. Our framework is flexible in
supporting runtime supervision with different types of content, including 2D
and 2.5D RGBD images, 3D focal stacks, and 4D light fields. Using our
framework, we demonstrate state-of-the-art results for all of these scenarios
in simulation and experiment.
- Abstract（参考訳）: ホログラフィックの近眼ディスプレイは、知覚的に重要なフォーカスキューを含む、バーチャルおよび拡張現実システムに前例のない機能を提供する。
コンピュータ生成ホログラフィー(CGH)のための人工知能駆動アルゴリズムは、最近ホログラムの画質と合成効率の改善に大きく進歩しているが、これらのアルゴリズムは、非常に高速であるが、非常に精度の低い位相制御を提供する新興位相専用空間光変調器(SLM)には直接適用できない。
これらのSLMの速度は時間多重化機能を提供し、本質的には部分的にコヒーレントなホログラフィック表示モードを可能にする。
本稿では,このようなホログラフィック近眼ディスプレイのカメラ校正波伝搬モデルの進歩を報告し,高速SLMの高量子化位相パターンを強力に最適化するCGHフレームワークを開発した。
本フレームワークは,2次元および2.5次元RGBD画像,3次元焦点スタック,4次元光フィールドなど,さまざまなタイプのコンテンツによる実行時の監視を支援する。
このフレームワークを用いて,シミュレーションおよび実験において,これらのシナリオの最先端結果を示す。
関連論文リスト
- Rapid stochastic spatial light modulator calibration and pixel crosstalk optimisation [0.0]
SLMディスプレイにおけるレーザービームの波面の正確な校正と強度プロファイルは、ホログラム電位の高密度化の鍵となる。
そこで本研究では,従来の手法よりも高速で,同じ精度を維持しながらキャリブレーションを行う手法を提案する。
このアプローチにより、SLMのウェーブフロントをわずか10のSLMフェーズパターンを使用して、ラムダ/170$を5分以内で測定することができます。
論文 参考訳（メタデータ） (2024-08-14T17:11:50Z) - Radiance Fields from Photons [18.15183252935672]
単一光子カメラ(SPC)を用いて個々の光子の粒度を学習する神経放射場である量子放射場を導入する。
シミュレーションとプロトタイプのSPCハードウェア,高速動作下での高忠実度再構成,低光域,超ダイナミックレンジ設定による実演を行った。
論文 参考訳（メタデータ） (2024-07-12T16:06:51Z) - Gear-NeRF: Free-Viewpoint Rendering and Tracking with Motion-aware Spatio-Temporal Sampling [70.34875558830241]
本研究では,シーンをレンダリングする動的領域の階層化モデリングを可能にする意味的セマンティックギアに基づく,時間的(4D)埋め込みの学習方法を提案する。
同時に、ほぼ無償で、当社のトラッキングアプローチは、既存のNeRFベースのメソッドでまだ達成されていない機能である、自由視点(free-view of interest)を可能にします。
論文 参考訳（メタデータ） (2024-06-06T03:37:39Z) - Configurable Learned Holography [33.45219677645646]
本稿では,RGBのみの2次元画像から様々なホログラム表示のための3次元ホログラムをインタラクティブに計算する学習モデルを提案する。
我々は,3次元ホログラム合成タスクの深度推定と3次元ホログラム合成の相関関係の同定に,ホログラム計算を頼れるようにした。
論文 参考訳（メタデータ） (2024-03-24T13:57:30Z) - PASTA: Towards Flexible and Efficient HDR Imaging Via Progressively Aggregated Spatio-Temporal Alignment [91.38256332633544]
PASTAは、HDRデゴスティングのためのプログレッシブアグリゲーションアグリゲーション・時空間アライメントフレームワークである。
提案手法は,特徴分散中の階層的表現を活用することにより,有効性と効率性を実現する。
実験結果から,従来のSOTA法よりもPASTAの方が視覚的品質と性能の両方で優れていることが示された。
論文 参考訳（メタデータ） (2024-03-15T15:05:29Z) - GGRt: Towards Pose-free Generalizable 3D Gaussian Splatting in Real-time [112.32349668385635]
GGRtは、現実のカメラポーズの必要性を軽減する、一般化可能な新しいビュー合成のための新しいアプローチである。
最初のポーズフリーの一般化可能な3D-GSフレームワークとして、GGRtは$ge$5 FPSで、リアルタイムレンダリングは$ge$100 FPSで実現している。
論文 参考訳（メタデータ） (2024-03-15T09:47:35Z) - A Portable Multiscopic Camera for Novel View and Time Synthesis in
Dynamic Scenes [42.00094186447837]
ダイナミックなシーンにおける新しいビューと時間合成のための専用モデルを備えた携帯型マルチスコープカメラシステムを提案する。
私たちのゴールは、ポータブルなマルチスコープカメラを使って、いつでもあらゆる視点から、ダイナミックなシーンの高品質な画像をレンダリングすることです。
論文 参考訳（メタデータ） (2022-08-30T17:53:17Z) - Neural Étendue Expander for Ultra-Wide-Angle High-Fidelity Holographic Display [51.399291206537384]
現代のホログラフィックディスプレイは、表示領域と回折光の最大固体角度の積である低い「エンテンダ」を有する。
自然画像データセットから学習したニューラルな「固有拡大器」を提案する。
ニューラルネットワーク拡張器を用いて,64$times$ 'etendue expansion of natural image in full color, and expand the FOV by a magnitude of horizontal and vertically。
論文 参考訳（メタデータ） (2021-09-16T17:21:52Z) - Learned holographic light transport [2.642698101441705]
ホログラフィーアルゴリズムはしばしば物理ホログラフィーディスプレイの結果と一致するシミュレーションで不足する。
我々の研究はホログラフィックディスプレイのホログラフィック光輸送を学習することで、このミスマッチに対処する。
本手法はホログラフィックディスプレイのシミュレーション精度と画質を劇的に向上させることができる。
論文 参考訳（メタデータ） (2021-08-01T12:05:33Z) - TimeLens: Event-based Video Frame Interpolation [54.28139783383213]
本稿では,合成法とフロー法の両方の利点を生かした,等価寄与法であるTime Lensを紹介する。
最先端のフレームベースおよびイベントベース手法よりもPSNRが最大5.21dB向上したことを示す。
論文 参考訳（メタデータ） (2021-06-14T10:33:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。