論文の概要: Learning Instance-Specific Parameters of Black-Box Models Using Differentiable Surrogates
- arxiv url: http://arxiv.org/abs/2407.17530v1
- Date: Tue, 23 Jul 2024 20:57:12 GMT
- ステータス: 処理完了
- システム内更新日: 2024-07-26 18:08:23.891402
- Title: Learning Instance-Specific Parameters of Black-Box Models Using Differentiable Surrogates
- Title(参考訳): 微分可能なサロゲートを用いたブラックボックスモデルの特異パラメータの学習
- Authors: Arnisha Khondaker, Nilanjan Ray,
- Abstract要約: 既存の手法は主にパラメータ空間からのランダムサンプリングやグリッドサンプリングに依存している。
この研究で初めて、ブラックボックスの入力固有のパラメータを学習することができる。
結果は説得力があり、PSNRが著しく増加し、SSIMは0.93に近づいた。
- 参考スコア(独自算出の注目度): 4.995343972237369
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Tuning parameters of a non-differentiable or black-box compute is challenging. Existing methods rely mostly on random sampling or grid sampling from the parameter space. Further, with all the current methods, it is not possible to supply any input specific parameters to the black-box. To the best of our knowledge, for the first time, we are able to learn input-specific parameters for a black box in this work. As a test application we choose a popular image denoising method BM3D as our black-box compute. Then, we use a differentiable surrogate model (a neural network) to approximate the black-box behaviour. Next, another neural network is used in an end-to-end fashion to learn input instance-specific parameters for the black-box. Drawing inspiration from the work of Tseng et al. [1] , we applied our method to the Smartphone Image Denoising Dataset (SIDD) for image denoising. The results are compelling, demonstrating a significant increase in PSNR and a notable improvement in SSIM nearing 0.93. Experimental results underscore the effectiveness of our approach in achieving substantial improvements in both model performance and optimization efficiency. For code and implementation details, please refer to our GitHub repository. [1] Ethan Tseng, Felix Yu, Yuting Yang, Fahim Mannan, Karl St. Arnaud, Derek Nowrouzezahrai, Jean-Francois Lalonde, and Felix Heide. Hyperparameter optimization in black-box image processing using differentiable proxies. ACM Transactions on Graphics (TOG), 38(4), 7 2019.
- Abstract(参考訳): 非微分可能またはブラックボックス計算のチューニングパラメータは困難である。
既存の手法は主にパラメータ空間からのランダムサンプリングやグリッドサンプリングに依存している。
さらに、現在のすべてのメソッドでは、入力固有のパラメータをブラックボックスに供給することはできない。
私たちの知る限りでは、この研究で初めて、ブラックボックスの入力固有のパラメータを学習できます。
テストアプリケーションとして、ブラックボックス計算としてBM3Dという一般的な画像認識手法を選択します。
次に、ブラックボックスの挙動を近似するために、微分可能なサロゲートモデル(ニューラルネットワーク)を用いる。
次に、別のニューラルネットワークをエンドツーエンドで使用して、ブラックボックスの入力インスタンス固有のパラメータを学習する。
Tseng et al [1] の成果からインスピレーションを得て,本手法をスマートフォン画像復調データセット(SIDD)に適用し,画像復調を行った。
結果は説得力があり、PSNRが著しく増加し、SSIMは0.93に近づいた。
実験結果から,モデル性能と最適化効率の両面において,本手法の有効性を実証した。
コードと実装の詳細については、GitHubリポジトリを参照してください。
[1]イーサン・ツェン、フェリックス・ユ、ユティング・ヤン、ファヒム・マンナン、カール・サン・アルノー、デレク・ノヴロゼザライ、ジャン=フランソワ・ラロンデ、フェリックス・ハイデ。
可変プロキシを用いたブラックボックス画像処理におけるハイパーパラメータ最適化
ACM Transactions on Graphics (TOG), 38(4), 7 2019
関連論文リスト
- CPT: Consistent Proxy Tuning for Black-box Optimization [63.06335358432746]
Proxy-tuningはブラックボックス言語モデルをチューニングするためのテスト時間出力調整を提供する。
本稿では,シンプルなブラックボックスチューニング手法であるConsistent Proxy Tuning (CPT)を紹介する。
CPTは、凍結した大きなブラックボックスモデルと別の凍結した小さなホワイトボックスモデルを利用して、トレーニングステージ最適化目標とテストタイムプロキシの一貫性を確保する。
論文 参考訳(メタデータ) (2024-07-01T10:23:14Z) - Prompt Mixing in Diffusion Models using the Black Scholes Algorithm [57.03116054807942]
本稿では,複数のテキストプロンプトの交わりで画像を生成することを目的とした,プロンプトミキシングのための新しいアプローチを提案する。
我々は、金融の価格設定に、拡散モデルとブラック・スコイルズ・モデルとの接続を利用する。
我々のプロンプトミキシングアルゴリズムはデータ効率が良いので、追加のトレーニングは必要ない。
論文 参考訳(メタデータ) (2024-05-22T14:25:57Z) - Dense RGB SLAM with Neural Implicit Maps [34.37572307973734]
ニューラル暗黙マップ表現を用いた高密度RGB SLAM法を提案する。
提案手法は,映像フレームの描画と入力を一致させることで,カメラの動きとニューラル暗黙マップを同時に解く。
提案手法は,従来の手法よりも良好な結果が得られ,最近のRGB-D SLAM法を超えている。
論文 参考訳(メタデータ) (2023-01-21T09:54:07Z) - Deep Dynamic Scene Deblurring from Optical Flow [53.625999196063574]
汚れは視覚的により快適な写真を提供し、写真がより便利になる。
非均一な曖昧さを数学的にモデル化することは困難である。
我々は,難解な特徴から鮮明な画像を復元する畳み込みニューラルネットワーク(CNN)を開発した。
論文 参考訳(メタデータ) (2023-01-18T06:37:21Z) - Multi-channel Nuclear Norm Minus Frobenius Norm Minimization for Color
Image Denoising [9.20787253404652]
従来の戦略の1つは、RGBイメージを相関の少ない色空間に変換し、新しい空間の各チャネルを別々に識別することである。
本稿では,核ノルムの最小化フレームワークであるフロベニウス・ノルム最小化フレームワークを用いて,カラー画像のマルチチャネル最適化モデルを提案する。
合成および実ノイズデータセットによる実験結果は,提案モデルが最先端モデルより優れていることを示す。
論文 参考訳(メタデータ) (2022-09-16T04:10:29Z) - Look at the Variance! Efficient Black-box Explanations with Sobol-based
Sensitivity Analysis [29.43533545491625]
本稿では,感性分析に基礎を置き,ソボの指標を用いた新しい帰属法について述べる。
提案手法は,視覚(および言語モデル)の標準ベンチマークにおいて,好適なスコアとなることを示す。
論文 参考訳(メタデータ) (2021-11-07T18:01:36Z) - Preconditioned Plug-and-Play ADMM with Locally Adjustable Denoiser for
Image Restoration [54.23646128082018]
非定常雑音分散のパラメータ化が可能なデノイザを使用するために、プラグアンドプレイの最適化の概念を拡張した。
画素調整可能なデノイザは,適切なプレコンディショニング戦略とともに,いくつかのアプリケーションに対して,プラグアンドプレイADMMアプローチをさらに改善できることを示す。
論文 参考訳(メタデータ) (2021-10-01T15:46:35Z) - Spatial-Separated Curve Rendering Network for Efficient and
High-Resolution Image Harmonization [59.19214040221055]
本稿では,空間分離型曲線描画ネットワーク(S$2$CRNet)を提案する。
提案手法は従来の手法と比較して90%以上のパラメータを減少させる。
提案手法は,既存の手法よりも10ドル以上高速な高解像度画像をリアルタイムにスムーズに処理することができる。
論文 参考訳(メタデータ) (2021-09-13T07:20:16Z) - A Comprehensive Comparison of Multi-Dimensional Image Denoising Methods [14.702885691557638]
合成と実世界の両方のデータセットで60以上の手法を比較した。
単純な行列ベースのアルゴリズムは、テンソルと同じような結果が得られることを示す。
合成ガウスノイズで訓練されたいくつかのモデルは、実世界のカラー画像とビデオデータセットに最先端のパフォーマンスを示す。
論文 参考訳(メタデータ) (2020-11-06T16:28:17Z) - Gaussian MRF Covariance Modeling for Efficient Black-Box Adversarial
Attacks [86.88061841975482]
我々は,ゼロオーダーのオラクルにのみアクセス可能なブラックボックス設定において,逆例を生成する問題について検討する。
我々はこの設定を用いて、FGSM(Fast Gradient Sign Method)のブラックボックス版と同様に、高速な1ステップの敵攻撃を見つける。
提案手法はクエリを少なくし,現在の技術よりも攻撃成功率が高いことを示す。
論文 参考訳(メタデータ) (2020-10-08T18:36:51Z) - Tuning-free Plug-and-Play Proximal Algorithm for Inverse Imaging
Problems [22.239477171296056]
Plug-and-play ()は、異なる学習アルゴリズムと先進的なデノイザプリエントを組み合わせた、カスタマイズされていないフレームワークである。
重要な問題です。
ベースとなるアプローチは、手動でパラメータを調整する必要があることです。
提案手法の鍵となるのは,パラメータの自動チューニングのためのネットワークポリシの開発である。
圧縮センシングと位相検索において有望な結果を示す。
論文 参考訳(メタデータ) (2020-02-22T03:09:48Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。