論文の概要: Automated data-driven selection of the hyperparameters for
Total-Variation based texture segmentation
- arxiv url: http://arxiv.org/abs/2004.09434v2
- Date: Tue, 12 May 2020 16:43:41 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-11 18:09:48.639471
- Title: Automated data-driven selection of the hyperparameters for
Total-Variation based texture segmentation
- Title(参考訳): 全変量に基づくテクスチャセグメンテーションのためのハイパーパラメータの自動選択
- Authors: Barbara Pascal and Samuel Vaiter and Nelly Pustelnik and Patrice Abry
- Abstract要約: 一般化されたスタインアンバイアスリスク推定器は、ガウス雑音に対処するために再検討される。
問題定式化は、スケール間および空間的に相関するノイズを自然に含む。
- 参考スコア(独自算出の注目度): 12.093824308505216
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Penalized Least Squares are widely used in signal and image processing. Yet,
it suffers from a major limitation since it requires fine-tuning of the
regularization parameters. Under assumptions on the noise probability
distribution, Stein-based approaches provide unbiased estimator of the
quadratic risk. The Generalized Stein Unbiased Risk Estimator is revisited to
handle correlated Gaussian noise without requiring to invert the covariance
matrix. Then, in order to avoid expansive grid search, it is necessary to
design algorithmic scheme minimizing the quadratic risk with respect to
regularization parameters. This work extends the Stein's Unbiased GrAdient
estimator of the Risk of Deledalle et al. to the case of correlated Gaussian
noise, deriving a general automatic tuning of regularization parameters. First,
the theoretical asymptotic unbiasedness of the gradient estimator is
demonstrated in the case of general correlated Gaussian noise. Then, the
proposed parameter selection strategy is particularized to fractal texture
segmentation, where problem formulation naturally entails inter-scale and
spatially correlated noise. Numerical assessment is provided, as well as
discussion of the practical issues.
- Abstract(参考訳): ペナライズド・リースト・スクエアは信号処理や画像処理に広く使われている。
しかし、正規化パラメータの微調整を必要とするため、大きな制限に悩まされる。
ノイズ確率分布の仮定の下で、スタインに基づくアプローチは二次リスクの偏りのない推定子を与える。
一般化シュタイン非バイアスリスク推定器は、共分散行列を反転させることなく相関ガウス雑音を処理するために再訪される。
そこで,広範グリッド探索を避けるためには,正規化パラメータに対する二次リスクを最小限に抑えるアルゴリズム的スキームを設計する必要がある。
この研究は、デレダールのリスクのスタインの非バイアス GrAdient 推定器を、正則化パラメータの一般的な自動チューニングを導出し、相関ガウス雑音の場合に拡張する。
まず,一般相関ガウス雑音の場合,勾配推定器の漸近的不偏性を示す。
提案するパラメータ選択戦略はフラクタルテクスチャセグメンテーションに特化され、問題定式化は自然にスケール間および空間的相関のあるノイズを伴う。
数値的な評価と実践的な問題についての議論が提供される。
関連論文リスト
- Information limits and Thouless-Anderson-Palmer equations for spiked matrix models with structured noise [19.496063739638924]
構造スパイクモデルに対するベイズ推定の飽和問題を考える。
適応的なThouless-Anderson-Palmer方程式の理論にインスパイアされた効率的なアルゴリズムを用いて、統計的限界を予測する方法を示す。
論文 参考訳(メタデータ) (2024-05-31T16:38:35Z) - Risk-Sensitive Diffusion for Perturbation-Robust Optimization [58.68233326265417]
スコア関数を持つものよりも、雑音のあるサンプルが別の目的関数を発生させることで、モデルが誤って最適化されることが示される。
リスクベクトルによってパラメータ化された微分方程式(SDE)の一種であるリスク感受性SDEを導入する。
ノイズのあるサンプルがガウス摂動によって引き起こされる場合のみ、ゼロ不安定測度が達成可能であることを証明する。
論文 参考訳(メタデータ) (2024-02-03T08:41:51Z) - Batches Stabilize the Minimum Norm Risk in High Dimensional
Overparameterized Linear Regression [21.83136833217205]
バッチ分割は計算効率と性能のトレードオフとして有用であることを示す。
最小ノルム推定器の自然な小バッチ版を提案し、その2次リスクの上限を導出する。
我々の境界は、新しい手法の組み合わせ、特にランダム部分空間上の雑音射影のワッサーシュタイン計量の正規近似によって導かれる。
論文 参考訳(メタデータ) (2023-06-14T11:02:08Z) - The Optimal Noise in Noise-Contrastive Learning Is Not What You Think [80.07065346699005]
この仮定から逸脱すると、実際により良い統計的推定結果が得られることが示される。
特に、最適な雑音分布は、データと異なり、また、別の家族からさえも異なる。
論文 参考訳(メタデータ) (2022-03-02T13:59:20Z) - Nonconvex Stochastic Scaled-Gradient Descent and Generalized Eigenvector
Problems [98.34292831923335]
オンライン相関解析の問題から,emphStochastic Scaled-Gradient Descent (SSD)アルゴリズムを提案する。
我々はこれらのアイデアをオンライン相関解析に適用し、局所収束率を正規性に比例した最適な1時間スケールのアルゴリズムを初めて導いた。
論文 参考訳(メタデータ) (2021-12-29T18:46:52Z) - Optimizing Information-theoretical Generalization Bounds via Anisotropic
Noise in SGLD [73.55632827932101]
SGLDにおけるノイズ構造を操作することにより,情報理論の一般化を最適化する。
低経験的リスクを保証するために制約を課すことで、最適なノイズ共分散が期待される勾配共分散の平方根であることを証明する。
論文 参考訳(メタデータ) (2021-10-26T15:02:27Z) - Near-Optimal High Probability Complexity Bounds for Non-Smooth
Stochastic Optimization with Heavy-Tailed Noise [63.304196997102494]
アルゴリズムが高い確率で小さな客観的残差を与えることを理論的に保証することが不可欠である。
既存の非滑らか凸最適化法は、負のパワーまたは対数的な信頼度に依存する境界の複雑さを持つ。
クリッピングを用いた2つの勾配法に対して, 新たなステップサイズルールを提案する。
論文 参考訳(メタデータ) (2021-06-10T17:54:21Z) - Model-based multi-parameter mapping [0.0]
定量的MRイメージングは、よりリッチな情報の内容と標準化された測定基準のためにますます好まれている。
推定はしばしば、異なる量のデータを分離して解くために、データのノイズサブセットを仮定する。
代わりに、生成モデルは定式化され、パラメータ推定を共同で回復するために反転することができる。
論文 参考訳(メタデータ) (2021-02-02T17:00:11Z) - Variable selection for Gaussian process regression through a sparse
projection [0.802904964931021]
本稿では,ガウス過程(GP)レグレッションと統合された新しい変数選択手法を提案する。
パラメータの調整と推定の精度を,選択したベンチマーク手法を用いて評価した。
論文 参考訳(メタデータ) (2020-08-25T01:06:10Z) - Shape Matters: Understanding the Implicit Bias of the Noise Covariance [76.54300276636982]
勾配降下のノイズはパラメータ化モデルに対するトレーニングにおいて重要な暗黙の正則化効果をもたらす。
ミニバッチやラベルの摂動によって引き起こされるパラメータ依存ノイズはガウスノイズよりもはるかに効果的であることを示す。
分析の結果,パラメータ依存ノイズは局所最小値に偏りを生じさせるが,球状ガウス雑音は生じないことがわかった。
論文 参考訳(メタデータ) (2020-06-15T18:31:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。