論文の概要: Configurable Learned Holography

• arxiv url: http://arxiv.org/abs/2405.01558v2
• Date: Mon, 6 May 2024 09:02:58 GMT
• ステータス: 処理完了
• システム内更新日: 2024-05-07 20:39:25.957242
• Title: Configurable Learned Holography
• Title（参考訳）: 構成可能な学習ホログラフィー
• Authors: Yicheng Zhan, Liang Shi, Wojciech Matusik, Qi Sun, Kaan Akşit,
• Abstract要約: 本稿では,RGBのみの2次元画像から様々なホログラム表示のための3次元ホログラムをインタラクティブに計算する学習モデルを提案する。 我々は,3次元ホログラム合成タスクの深度推定と3次元ホログラム合成の相関関係の同定に,ホログラム計算を頼れるようにした。
• 参考スコア（独自算出の注目度）: 33.45219677645646
• License: http://creativecommons.org/licenses/by/4.0/
• Abstract: In the pursuit of advancing holographic display technology, we face a unique yet persistent roadblock: the inflexibility of learned holography in adapting to various hardware configurations. This is due to the variances in the complex optical components and system settings in existing holographic displays. Although the emerging learned approaches have enabled rapid and high-quality hologram generation, any alteration in display hardware still requires a retraining of the model. Our work introduces a configurable learned model that interactively computes 3D holograms from RGB-only 2D images for a variety of holographic displays. The model can be conditioned to predefined hardware parameters of existing holographic displays such as working wavelengths, pixel pitch, propagation distance, and peak brightness without having to retrain. In addition, our model accommodates various hologram types, including conventional single-color and emerging multi-color holograms that simultaneously use multiple color primaries in holographic displays. Notably, we enabled our hologram computations to rely on identifying the correlation between depth estimation and 3D hologram synthesis tasks within the learning domain for the first time in the literature. We employ knowledge distillation via a student-teacher learning strategy to streamline our model for interactive performance. Achieving up to a 2x speed improvement compared to state-of-the-art models while consistently generating high-quality 3D holograms with different hardware configurations.
• Abstract（参考訳）: ホログラフィック表示技術の進歩を追求する中で,我々は,学習ホログラフィが様々なハードウェア構成に適応する際の柔軟性という,独特で永続的な道路ブロックに直面している。 これは、複雑な光学部品のばらつきと、既存のホログラフィックディスプレイのシステム設定が原因である。 新たな学習手法によって、高速かつ高品質なホログラム生成が可能になったが、ディスプレイハードウェアの変更にはモデルの再訓練が必要である。 本研究では,RGBのみの2次元画像から様々なホログラム表示のための3次元ホログラムをインタラクティブに計算する,構成可能な学習モデルを提案する。 このモデルは、作業波長、画素ピッチ、伝播距離、ピーク輝度などの既存のホログラフィックディスプレイの事前定義されたハードウェアパラメータに、再トレーニングすることなく条件付けすることができる。 さらに,本モデルでは,複数のカラープライマリをホログラムディスプレイに同時に使用する,従来の単色ホログラムや多色ホログラムなど,さまざまなホログラムタイプに対応している。 特に,本論文では,学習領域における深度推定と3次元ホログラム合成タスクの相関関係の同定に,ホログラム計算を有効にした。 我々は,対話的パフォーマンスのためのモデルを合理化するために,学生-教師の学習戦略を介して知識蒸留を採用する。 最先端モデルと比較して最大2倍のスピード向上を実現し、ハードウェア構成の異なる高品質な3Dホログラムを一貫して生成する。

関連論文リスト

• Re-Thinking Inverse Graphics With Large Language Models [51.333105116400205]
  逆グラフィックス -- イメージを物理変数に反転させ、レンダリングすると観察されたシーンの再現を可能にする -- は、コンピュータビジョンとグラフィックスにおいて根本的な課題である。 LLMを中心とした逆グラフフレームワークである逆グラフ大言語モデル(IG-LLM)を提案する。 我々は、凍結した事前学習されたビジュアルエンコーダと連続的な数値ヘッドを組み込んで、エンドツーエンドのトレーニングを可能にする。
  論文  参考訳（メタデータ） (2024-04-23T16:59:02Z)
• Holo-VQVAE: VQ-VAE for phase-only holograms [1.534667887016089]
  ホログラフィーは視覚技術革新の最前線にあり、光波振幅と位相の操作による没入型3次元可視化を提供する。 ホログラム生成に関する最近の研究は、主に画像からホログラムへの変換に焦点を当てており、既存の画像からホログラムを生成する。 位相限定ホログラム(POHs)に適した新規な生成フレームワークであるHolo-VQVAEについて述べる。
  論文  参考訳（メタデータ） (2024-03-29T15:27:28Z)
• FLARE: Fast Learning of Animatable and Relightable Mesh Avatars [64.48254296523977]
  私たちのゴールは、幾何学的に正確で、リアルで、楽しい、現在のレンダリングシステムと互換性のあるビデオから、パーソナライズ可能な3Dアバターを効率的に学習することです。 単眼ビデオからアニマタブルアバターとリライトブルアバターの作成を可能にする技術であるFLAREを紹介する。
  論文  参考訳（メタデータ） (2023-10-26T16:13:00Z)
• AutoColor: Learned Light Power Control for Multi-Color Holograms [15.655689651318033]
  多色ホログラムは複数の光源からの同時照明に依存している。 マルチカラーホログラムを照らすのに必要な最適な光源パワーを推定するための最初の学習手法であるAutoColorを紹介する。
  論文  参考訳（メタデータ） (2023-05-02T17:14:03Z)
• RiCS: A 2D Self-Occlusion Map for Harmonizing Volumetric Objects [68.85305626324694]
  カメラ空間における光マーチング (RiCS) は、3次元における前景物体の自己閉塞を2次元の自己閉塞マップに表現する新しい手法である。 表現マップは画像の質を高めるだけでなく,時間的コヒーレントな複雑な影効果をモデル化できることを示す。
  論文  参考訳（メタデータ） (2022-05-14T05:35:35Z)
• Time-multiplexed Neural Holography: A flexible framework for holographic near-eye displays with fast heavily-quantized spatial light modulators [44.73608798155336]
  ホログラフィックの近眼ディスプレイは、バーチャルおよび拡張現実システムに前例のない機能を提供する。 このようなホログラム近眼ディスプレイのカメラ校正波伝搬モデルの進歩を報告する。 我々のフレームワークは,2Dおよび2.5D RGBDイメージ,3D焦点スタック,4D光フィールドなど,さまざまなタイプのコンテンツで実行時の監視を支援するために柔軟である。
  論文  参考訳（メタデータ） (2022-05-05T00:03:50Z)
• Learned holographic light transport [2.642698101441705]
  ホログラフィーアルゴリズムはしばしば物理ホログラフィーディスプレイの結果と一致するシミュレーションで不足する。 我々の研究はホログラフィックディスプレイのホログラフィック光輸送を学習することで、このミスマッチに対処する。 本手法はホログラフィックディスプレイのシミュレーション精度と画質を劇的に向上させることができる。
  論文  参考訳（メタデータ） (2021-08-01T12:05:33Z)
• Pixel Codec Avatars [99.36561532588831]
  Pixel Codec Avatars(PiCA)は、3D人間の顔の深い生成モデルです。 oculus quest 2のモバイルvrヘッドセットでは、同じシーンで5つのアバターがリアルタイムでレンダリングされる。
  論文  参考訳（メタデータ） (2021-04-09T23:17:36Z)
• Intrinsic Autoencoders for Joint Neural Rendering and Intrinsic Image Decomposition [67.9464567157846]
  合成3Dモデルからリアルな画像を生成するためのオートエンコーダを提案し,同時に実像を本質的な形状と外観特性に分解する。 実験により, レンダリングと分解の併用処理が有益であることが確認され, 画像から画像への翻訳の質的, 定量的なベースラインよりも優れた結果が得られた。
  論文  参考訳（メタデータ） (2020-06-29T12:53:58Z)
• Deep DIH : Statistically Inferred Reconstruction of Digital In-Line Holography by Deep Learning [1.4619386068190985]
  デジタルインラインホログラフィーは、顕微鏡オブジェクトの2次元ホログラムから3次元画像を再構成するのに一般的に用いられる。 本稿では,シングルショットホログラム再構成のためのオートエンコーダに基づくディープラーニングアーキテクチャの実装を提案する。
  論文  参考訳（メタデータ） (2020-04-25T20:39:25Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。