論文の概要: Learning Adaptive Sampling and Reconstruction for Volume Visualization
- arxiv url: http://arxiv.org/abs/2007.10093v1
- Date: Mon, 20 Jul 2020 13:36:54 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-08 14:52:18.960805
- Title: Learning Adaptive Sampling and Reconstruction for Volume Visualization
- Title(参考訳): ボリューム可視化のための学習適応サンプリングと再構成
- Authors: Sebastian Weiss, Mustafa I\c{s}{\i}k, Justus Thies, R\"udiger
Westermann
- Abstract要約: データビジュアライゼーションにおける中心的な課題は、関連する情報がエンコードされたデータセットの画像を生成するために、どのデータサンプルが必要であるかを理解することである。
本研究では,人工知能が高密度あるいは低密度のデータをどこでサンプリングするかを予測することができるかどうか,という疑問に答える第一歩を踏み出す。
低解像度の入力画像からスパース適応サンプリング構造を生成するために、エンドツーエンドで訓練された新しいニューラルレンダリングパイプラインを導入する。
- 参考スコア(独自算出の注目度): 13.595857406165294
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: A central challenge in data visualization is to understand which data samples
are required to generate an image of a data set in which the relevant
information is encoded. In this work, we make a first step towards answering
the question of whether an artificial neural network can predict where to
sample the data with higher or lower density, by learning of correspondences
between the data, the sampling patterns and the generated images. We introduce
a novel neural rendering pipeline, which is trained end-to-end to generate a
sparse adaptive sampling structure from a given low-resolution input image, and
reconstructs a high-resolution image from the sparse set of samples. For the
first time, to the best of our knowledge, we demonstrate that the selection of
structures that are relevant for the final visual representation can be jointly
learned together with the reconstruction of this representation from these
structures. Therefore, we introduce differentiable sampling and reconstruction
stages, which can leverage back-propagation based on supervised losses solely
on the final image. We shed light on the adaptive sampling patterns generated
by the network pipeline and analyze its use for volume visualization including
isosurface and direct volume rendering.
- Abstract(参考訳): データ視覚化における中心的な課題は、関連する情報がエンコードされたデータセットのイメージを生成するためにどのデータサンプルが必要なのかを理解することである。
本研究では,データ,サンプリングパターン,生成した画像の対応関係を学習することにより,人工知能が高密度または低密度のサンプルデータの場所を予測できるかどうか,という疑問に答える第一歩を踏み出す。
与えられた低解像度入力画像からスパース適応サンプリング構造を生成するためにエンドツーエンドを訓練した新しいニューラルネットワークレンダリングパイプラインを導入し、スパースサンプルセットから高分解能画像を再構成する。
はじめに、私たちの知る限りでは、最終的な視覚表現に関連する構造の選択は、これらの構造からこの表現を再構築すると共に、共同で学習できることが示される。
そこで本研究では,最終画像のみに基づく教師付き損失に基づくバックプロパゲーションを活用可能な,異なるサンプリングおよび再構築段階を提案する。
我々は,ネットワークパイプラインが生成する適応サンプリングパターンに光を当て,アイソサーフェスや直接ボリュームレンダリングを含むボリュームビジュアライゼーションの用途を分析する。
関連論文リスト
- Re-Visible Dual-Domain Self-Supervised Deep Unfolding Network for MRI Reconstruction [48.30341580103962]
本稿では、これらの問題に対処するために、新しい再視覚的二重ドメイン自己教師型深層展開ネットワークを提案する。
エンド・ツー・エンドの再構築を実現するために,シャンブルとポック・プロキシ・ポイント・アルゴリズム(DUN-CP-PPA)に基づく深層展開ネットワークを設計する。
高速MRIおよびIXIデータセットを用いて行った実験により,本手法は再建性能において最先端の手法よりも有意に優れていることが示された。
論文 参考訳(メタデータ) (2025-01-07T12:29:32Z) - AdaNeRF: Adaptive Sampling for Real-time Rendering of Neural Radiance
Fields [8.214695794896127]
新たなビュー合成は、スパース観測から直接神経放射場を学習することで、近年革新されている。
この新たなパラダイムによる画像のレンダリングは、ボリュームレンダリング方程式の正確な4分の1は、各光線に対して大量のサンプルを必要とするため、遅い。
本稿では,必要なサンプル点数を最大限に削減する方法を学習し,方向性を示す新しいデュアルネットワークアーキテクチャを提案する。
論文 参考訳(メタデータ) (2022-07-21T05:59:13Z) - PUERT: Probabilistic Under-sampling and Explicable Reconstruction
Network for CS-MRI [47.24613772568027]
圧縮センシングMRI(Compressed Sensing MRI)は,k空間データをサンプリングし,MRI画像の高速化を目的とする。
本稿では,サンプリングパターンと再構成ネットワークを協調的に最適化するために,PUERTと呼ばれる新しいエンドツーエンドの確率的アンダーサンプリングと明示的再構成neTworkを提案する。
2つの広く利用されているMRIデータセットの実験により、提案したPUERTは、定量的な測定値と視覚的品質の両方の観点から、最先端の結果が得られることを示した。
論文 参考訳(メタデータ) (2022-04-24T04:23:57Z) - Is Deep Image Prior in Need of a Good Education? [57.3399060347311]
画像再構成に有効な先行画像として, 奥行き画像が導入された。
その印象的な再建性にもかかわらず、学習技術や伝統的な再建技術と比べてアプローチは遅い。
計算課題に対処する2段階の学習パラダイムを開発する。
論文 参考訳(メタデータ) (2021-11-23T15:08:26Z) - Single-pass Object-adaptive Data Undersampling and Reconstruction for
MRI [6.599344783327054]
本稿では,畳み込みニューラルネットワークMNetを用いたデータ駆動型サンプリング手法を提案する。
ネットワークは、各オブジェクトに対する非常に限られた低周波k空間データを観測し、所望のアンダーサンプリングパターンを迅速に予測する。
高速MRI膝関節データセットの実験結果から,提案した学習アンダーサンプリングネットワークを用いて,4倍,8倍の加速度で物体特異的マスクを生成できることが示された。
論文 参考訳(メタデータ) (2021-11-17T16:06:06Z) - Conditional Variational Autoencoder for Learned Image Reconstruction [5.487951901731039]
本研究では,未知画像の後部分布を問合せ観測で近似する新しいフレームワークを開発する。
暗黙のノイズモデルと先行処理を処理し、データ生成プロセス(フォワード演算子)を組み込み、学習された再構成特性は異なるデータセット間で転送可能である。
論文 参考訳(メタデータ) (2021-10-22T10:02:48Z) - Self-supervised Audiovisual Representation Learning for Remote Sensing Data [96.23611272637943]
遠隔センシングにおける深層ニューラルネットワークの事前学習のための自己教師型アプローチを提案する。
ジオタグ付きオーディオ記録とリモートセンシングの対応を利用して、これは完全にラベルなしの方法で行われる。
提案手法は,既存のリモートセンシング画像の事前学習方法よりも優れていることを示す。
論文 参考訳(メタデータ) (2021-08-02T07:50:50Z) - Neural BRDF Representation and Importance Sampling [79.84316447473873]
本稿では,リフレクタンスBRDFデータのコンパクトニューラルネットワークに基づく表現について述べる。
BRDFを軽量ネットワークとしてエンコードし、適応角サンプリングによるトレーニングスキームを提案する。
複数の実世界のデータセットから等方性および異方性BRDFの符号化結果を評価する。
論文 参考訳(メタデータ) (2021-02-11T12:00:24Z) - Set Based Stochastic Subsampling [85.5331107565578]
本稿では,2段階間ニューラルサブサンプリングモデルを提案する。
画像分類,画像再構成,機能再構築,少数ショット分類など,様々なタスクにおいて,低いサブサンプリング率で関連ベースラインを上回っていることを示す。
論文 参考訳(メタデータ) (2020-06-25T07:36:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。