論文の概要: HyperINR: A Fast and Predictive Hypernetwork for Implicit Neural
Representations via Knowledge Distillation
- arxiv url: http://arxiv.org/abs/2304.04188v1
- Date: Sun, 9 Apr 2023 08:10:10 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-11 17:10:04.303098
- Title: HyperINR: A Fast and Predictive Hypernetwork for Implicit Neural
Representations via Knowledge Distillation
- Title(参考訳): HyperINR:知識蒸留による神経表現の高速かつ予測可能なハイパーネットワーク
- Authors: Qi Wu, David Bauer, Yuyang Chen, Kwan-Liu Ma
- Abstract要約: Inlicit Neural Representations (INRs)は近年、科学的可視化の分野で大きな可能性を秘めている。
本稿では,コンパクトINRの重みを直接予測できる新しいハイパーネットワークアーキテクチャであるHyperINRを紹介する。
多分解能ハッシュ符号化ユニットのアンサンブルを一斉に利用することにより、INRは最先端の推論性能を得る。
- 参考スコア(独自算出の注目度): 31.44962361819199
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: Implicit Neural Representations (INRs) have recently exhibited immense
potential in the field of scientific visualization for both data generation and
visualization tasks. However, these representations often consist of large
multi-layer perceptrons (MLPs), necessitating millions of operations for a
single forward pass, consequently hindering interactive visual exploration.
While reducing the size of the MLPs and employing efficient parametric encoding
schemes can alleviate this issue, it compromises generalizability for unseen
parameters, rendering it unsuitable for tasks such as temporal
super-resolution. In this paper, we introduce HyperINR, a novel hypernetwork
architecture capable of directly predicting the weights for a compact INR. By
harnessing an ensemble of multiresolution hash encoding units in unison, the
resulting INR attains state-of-the-art inference performance (up to 100x higher
inference bandwidth) and can support interactive photo-realistic volume
visualization. Additionally, by incorporating knowledge distillation,
exceptional data and visualization generation quality is achieved, making our
method valuable for real-time parameter exploration. We validate the
effectiveness of the HyperINR architecture through a comprehensive ablation
study. We showcase the versatility of HyperINR across three distinct scientific
domains: novel view synthesis, temporal super-resolution of volume data, and
volume rendering with dynamic global shadows. By simultaneously achieving
efficiency and generalizability, HyperINR paves the way for applying INR in a
wider array of scientific visualization applications.
- Abstract(参考訳): Inlicit Neural Representations (INRs) は、最近、データ生成と可視化の両方のタスクにおいて、科学的可視化の分野で大きな可能性を示した。
しかしながら、これらの表現はしばしば大きな多層パーセプトロン(MLP)で構成され、単一の前方通過のために数百万の操作を必要とするため、インタラクティブな視覚探索を妨げている。
MLPのサイズを小さくし、効率的なパラメトリック符号化方式を用いることでこの問題を軽減できるが、未確認パラメータの一般化性を損なうため、時間的超解像のようなタスクには適さない。
本稿では,コンパクトINRの重みを直接予測できる新しいハイパーネットワークアーキテクチャであるHyperINRを紹介する。
多解像度ハッシュ符号化ユニットのアンサンブルを一斉に利用することにより、INRは最先端の推論性能(最大100倍の推論帯域)を実現し、インタラクティブなフォトリアリスティックボリューム可視化をサポートすることができる。
また, 知識蒸留を組み込むことにより, 特別なデータと可視化生成品質を実現し, リアルタイムパラメータ探索に有用である。
包括的アブレーション研究により,HyperINRアーキテクチャの有効性を検証した。
我々は,新しいビュー合成,ボリュームデータの時間的超解像,動的グローバルシャドーによるボリュームレンダリングという3つの異なる科学的領域にわたるhyperinrの汎用性について紹介する。
効率性と一般化性を同時に達成することにより、HyperINRはINRを幅広い科学的視覚化アプリケーションに適用する道を開く。
関連論文リスト
- Memory-efficient High-resolution OCT Volume Synthesis with Cascaded Amortized Latent Diffusion Models [48.87160158792048]
本稿では,高分解能CTボリュームをメモリ効率よく合成できるCA-LDM(Cascaded amortized Latent diffusion model)を提案する。
公開高解像度OCTデータセットを用いた実験により、我々の合成データは、既存の手法の能力を超越した、現実的な高解像度かつグローバルな特徴を持つことが示された。
論文 参考訳(メタデータ) (2024-05-26T10:58:22Z) - Hybrid Convolutional and Attention Network for Hyperspectral Image Denoising [54.110544509099526]
ハイパースペクトル画像(HSI)は、ハイパースペクトルデータの効果的な解析と解釈に重要である。
ハイブリット・コンボリューション・アテンション・ネットワーク(HCANet)を提案する。
主流HSIデータセットに対する実験結果は,提案したHCANetの合理性と有効性を示している。
論文 参考訳(メタデータ) (2024-03-15T07:18:43Z) - ADASR: An Adversarial Auto-Augmentation Framework for Hyperspectral and
Multispectral Data Fusion [54.668445421149364]
HSI(Deep Learning-based Hyperspectral Image)は、HSI(Hyperspectral Image)とMSI(Multispectral Image)を深層ニューラルネットワーク(DNN)に融合させることにより、高空間分解能HSI(HR-HSI)を生成することを目的としている。
本稿では, HSI-MSI 融合のためのデータ多様性を向上するために, HSI-MSI サンプルペアの自動最適化と拡張を行う新しい逆自動データ拡張フレームワーク ADASR を提案する。
論文 参考訳(メタデータ) (2023-10-11T07:30:37Z) - Multi-Depth Branch Network for Efficient Image Super-Resolution [12.042706918188566]
超解像(SR)における長年の課題は、低解像(LR)の高頻度細部を効率的に拡張する方法である。
MDBM(Multi-Depth Branch Module)を特徴とする非対称SRアーキテクチャを提案する。
MDBMには異なる深さの枝があり、高い周波数と低周波の情報を同時に、効率的に捉えるように設計されている。
論文 参考訳(メタデータ) (2023-09-29T15:46:25Z) - FFEINR: Flow Feature-Enhanced Implicit Neural Representation for
Spatio-temporal Super-Resolution [4.577685231084759]
本稿では,フローフィールドデータの超高分解能化のための特徴強調型ニューラルインシシット表現(FFEINR)を提案する。
モデル構造とサンプリング分解能の観点から、暗黙のニューラル表現を最大限に活用することができる。
FFEINRのトレーニングプロセスは、入力層に機能拡張を導入することで容易になる。
論文 参考訳(メタデータ) (2023-08-24T02:28:18Z) - ESSAformer: Efficient Transformer for Hyperspectral Image
Super-resolution [76.7408734079706]
単一ハイパースペクトル像超解像(単一HSI-SR)は、低分解能観測から高分解能ハイパースペクトル像を復元することを目的としている。
本稿では,1つのHSI-SRの繰り返し精製構造を持つESSA注目組込みトランスフォーマネットワークであるESSAformerを提案する。
論文 参考訳(メタデータ) (2023-07-26T07:45:14Z) - Distributed Neural Representation for Reactive in situ Visualization [23.80657290203846]
Inlicit Neural representations (INR) は、大規模ボリュームデータを圧縮するための強力なツールとして登場した。
分散ニューラル表現を開発し,それをその場での可視化に最適化する。
我々の技術はプロセス間のデータ交換を排除し、最先端の圧縮速度、品質、比率を達成する。
論文 参考訳(メタデータ) (2023-03-28T03:55:47Z) - Implicit Neural Representation Learning for Hyperspectral Image
Super-Resolution [0.0]
Inlicit Neural Representations (INR)は、新しい効果的な表現として進歩を遂げている。
本稿では、空間座標を対応するスペクトル放射率値にマッピングする連続関数により、HSIを表すINRに基づく新しいHSI再構成モデルを提案する。
論文 参考訳(メタデータ) (2021-12-20T14:07:54Z) - Parameterized Hypercomplex Graph Neural Networks for Graph
Classification [1.1852406625172216]
我々は超複雑特徴変換の特性を利用するグラフニューラルネットワークを開発した。
特に、提案したモデルのクラスでは、代数自身を特定する乗法則は、トレーニング中にデータから推測される。
提案するハイパーコンプレックスgnnをいくつかのオープングラフベンチマークデータセット上でテストし,そのモデルが最先端の性能に達することを示す。
論文 参考訳(メタデータ) (2021-03-30T18:01:06Z) - Neural BRDF Representation and Importance Sampling [79.84316447473873]
本稿では,リフレクタンスBRDFデータのコンパクトニューラルネットワークに基づく表現について述べる。
BRDFを軽量ネットワークとしてエンコードし、適応角サンプリングによるトレーニングスキームを提案する。
複数の実世界のデータセットから等方性および異方性BRDFの符号化結果を評価する。
論文 参考訳(メタデータ) (2021-02-11T12:00:24Z) - Spatial-Spectral Residual Network for Hyperspectral Image
Super-Resolution [82.1739023587565]
ハイパースペクトル画像超解像のための新しいスペクトル空間残差ネットワーク(SSRNet)を提案する。
提案手法は,2次元畳み込みではなく3次元畳み込みを用いて空間スペクトル情報の探索を効果的に行うことができる。
各ユニットでは空間的・時間的分離可能な3次元畳み込みを用いて空間的・スペクトル的な情報を抽出する。
論文 参考訳(メタデータ) (2020-01-14T03:34:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。