論文の概要: Calibrated $α$-Barycenters for Multiobjective $f$-Divergence Optimization
- arxiv url: http://arxiv.org/abs/2610.16819v1
- Date: Mon, 12 Oct 2026 14:02:15 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-18 21:25:12.736856
- Title: Calibrated $α$-Barycenters for Multiobjective $f$-Divergence Optimization
- Title(参考訳): 多目的$f$-Divergence最適化のための校正$α$-Barycenters
- Abstract要約: CAL-$-MODMは非線形予測器を1つのバリセンターに集約する。
CAL-p2はL-BFGSより3.15タイム、Direct-TRより1.10タイムという中央値のペアアップを実現している。
- 参考スコア(独自算出の注目度): 9.096942663106747
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Matching one distribution to many targets can require repeated evaluations of every target. CAL-$α$-MODM aggregates a nonlinear predictor into one barycenter, calibrates its residual derivatives, and checks steps against the original $f$-divergence objective. Under smoothness assumptions, calibration controls parameter-step model error without requiring targets to be close to the model. Exact-oracle stationarity and local convergence guarantees are established. At common matching, canonical geometry cancels the leading quadratic iteration error, giving cubic convergence with second-order calibration and sufficiently accurate inner solves. High-precision experiments support this prediction. Sensitivity-based initialization also accelerates preference continuation along regular stationary branches. On 300-target Jensen--Shannon problems, CAL-p2 achieves median paired speedups of $3.15\times$ over L-BFGS and $1.10\times$ over second-order Direct-TR, across 23/25 and 24/25 objective-comparable stationary pairs. The savings arise when cheaper predictor queries offset calibration overhead.
- Abstract(参考訳): 1つの分布を多くのターゲットにマッチさせるには、各ターゲットの繰り返し評価が必要である。
CAL-$α$-MODMは非線形予測器を1つのバリセンターに集約し、その残留デリバティブを校正し、元の$f$-divergenceの目的に対してステップをチェックする。
滑らかな仮定の下では、キャリブレーションはターゲットをモデルに近づけることなくパラメータステップモデルの誤差を制御する。
厳密な軌道の定常性と局所収束保証が確立される。
共通マッチングにおいて、正準幾何は2階の校正と十分正確な内部解を伴う立方収束を与える2次反復誤差をキャンセルする。
高精度な実験はこの予測を支持している。
感性に基づく初期化は、通常の定常枝に沿った嗜好継続を加速させる。
300ターゲットのジェンセン-シャノン問題では、CAL-p2はL-BFGSよりも3.15\times$、23/25対と24/25対の2階ダイレクトTRより1.10\times$の平均的なペアスピードアップを達成した。
より安価な予測器クエリーがオフセットキャリブレーションのオーバーヘッドを発生させる。
関連論文リスト
- $σ$Transfer: Uncertainty Transfer from Small to Large Networks under $μ\mathrm{P}$ [61.96648353048054]
ラプラス近似において信頼性の高い予測不確実性を選択する新しい方法を示す。
我々は、前者のカーネルの収束、後続の共分散、選択精度、および後続の意思決定を示す。
同じ後部安定性は、取得の転送、OOD検出、および棄権決定を可能にする。
論文 参考訳(メタデータ) (2026-10-08T10:40:32Z) - CORE-STACK+: Meta-Learning for Deep Stacked Generalization [0.0]
スタックングヘテロジニアス視覚バックボーン(CNN、ViT、ハイブリッド)は、精度、校正、堅牢性のデファクトレシピである。
予測空間の多重コリンはメタラーナーのグラム行列を悪条件にし、重みの分散を膨らませ、薄い多様体上の脆い解を生成する。
ECEは、ホック後の温度スケーリングなしでディープアンサンブルよりも2.1タイムスで改善している。
論文 参考訳(メタデータ) (2026-09-22T18:03:36Z) - Saturation Makes Quantization Error Additive: A Coverage Model with a Certificate [0.0]
混合精度量子化は、モデルのどの部分がより高い精度を維持するかを決定する必要がある。
本研究は, 層単位での定量化による損失を, 層ごとの感性や, 対方向の感性から再現可能であることを示す。
本稿では, 測定値の差分プロファイルである$f(S)=cbigl (1-prod_iin S (1-a_i)bigr)$を, その$L$適合ブレークレートから数パーセント以内まで再現する。
論文 参考訳(メタデータ) (2026-07-14T02:08:33Z) - Asymptotic-Preserving A Posteriori Analysis of Diffusion and Flow-Matching Samplers [0.6768558752130311]
拡散及びフローマッチングサンプリングは、学習した確率フローODEを、大きなノイズスケールから小さな終端フロア($_min$)まで統合し、スコアが硬く、フローが境界層を発達させる。
特異摂動パラメータとして$_min$を扱い、どの固定ステップサンプリングが解けるかを決定する。
論文 参考訳(メタデータ) (2026-07-05T04:48:33Z) - Adaptive Calibration in Non-Stationary Environments [44.81344039432424]
複数のキャリブレーション対策の下で適応的なキャリブレーション保証を実現するアルゴリズムの組を開発する。
我々の手法は先行研究(Hu et al., 2026, Luo et al., 2025)の上に構築され、基礎となる基底真理付近でより微細な分解を割り当てる予測空間の非一様分割を導入する。
論文 参考訳(メタデータ) (2026-05-12T04:06:40Z) - High-Probability Convergence in Decentralized Stochastic Optimization with Gradient Tracking [69.90407799170687]
分散最適化における高確率収束保証について検討する。
その結果, 地平線上の条件は, 比較時間と同一であることがわかった。
論文 参考訳(メタデータ) (2026-04-30T22:45:21Z) - Optimal Unconstrained Self-Distillation in Ridge Regression: Strict Improvements, Precise Asymptotics, and One-Shot Tuning [61.07540493350384]
自己蒸留(英: Self-distillation, SD)とは、教師自身の予測と地道の混合で学生を訓練する過程である。
任意の予測リスクに対して、各正規化レベルにおいて、最適に混合された学生がリッジ教師に改善されることが示される。
本稿では,グリッド探索やサンプル分割,再構成なしに$star$を推定する一貫したワンショットチューニング手法を提案する。
論文 参考訳(メタデータ) (2026-02-19T17:21:15Z) - Faster Diffusion Models via Higher-Order Approximation [28.824924809206255]
本稿では,d1+2/K varepsilon-1/K $$のスコア関数評価のみを必要とする,原則付き無トレーニングサンプリングアルゴリズムを提案する。
我々の理論はロバストなvis-a-vis不正確なスコア推定であり、スコア推定誤差が増加するにつれて優雅に劣化する。
より広範に、我々は高速サンプリングのための高次手法の有効性を理解するための理論的枠組みを開発した。
論文 参考訳(メタデータ) (2025-06-30T16:49:03Z) - Optimal Robust Linear Regression in Nearly Linear Time [97.11565882347772]
学習者が生成モデル$Y = langle X,w* rangle + epsilon$から$n$のサンプルにアクセスできるような高次元頑健な線形回帰問題について検討する。
i) $X$ is L4-L2 hypercontractive, $mathbbE [XXtop]$ has bounded condition number and $epsilon$ has bounded variance, (ii) $X$ is sub-Gaussian with identity second moment and $epsilon$ is
論文 参考訳(メタデータ) (2020-07-16T06:44:44Z) - Debiasing Distributed Second Order Optimization with Surrogate Sketching
and Scaled Regularization [101.5159744660701]
分散第2次最適化において、標準的な戦略は、データの小さなスケッチやバッチに基づいて、多くの局所的な見積もりを平均化することである。
本稿では,分散二階法における収束率の理論的および実証的改善を両立させるため,局所的な推定を嫌悪する新しい手法を提案する。
論文 参考訳(メタデータ) (2020-07-02T18:08:14Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。