論文の概要: Bayesian Distance Weighted Discrimination
- arxiv url: http://arxiv.org/abs/2010.03111v1
- Date: Wed, 7 Oct 2020 02:15:04 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-09 22:44:58.046102
- Title: Bayesian Distance Weighted Discrimination
- Title(参考訳): ベイズ距離重み付き識別
- Authors: Eric F. Lock
- Abstract要約: 距離重み付き識別(DWD)は,高次元データを用いた分類作業に適した線形識別法である。
本稿では、DWDが適切なベイズ分布のモードを特定することを示す。
本稿では,DWDに対するベイズ的アプローチを用いて,よく校正された後続クラスの確率を計算する方法を示す。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Distance weighted discrimination (DWD) is a linear discrimination method that
is particularly well-suited for classification tasks with high-dimensional
data. The DWD coefficients minimize an intuitive objective function, which can
solved very efficiently using state-of-the-art optimization techniques.
However, DWD has not yet been cast into a model-based framework for statistical
inference. In this article we show that DWD identifies the mode of a proper
Bayesian posterior distribution, that results from a particular link function
for the class probabilities and a shrinkage-inducing proper prior distribution
on the coefficients. We describe a relatively efficient Markov chain Monte
Carlo (MCMC) algorithm to simulate from the true posterior under this Bayesian
framework. We show that the posterior is asymptotically normal and derive the
mean and covariance matrix of its limiting distribution. Through several
simulation studies and an application to breast cancer genomics we demonstrate
how the Bayesian approach to DWD can be used to (1) compute well-calibrated
posterior class probabilities, (2) assess uncertainty in the DWD coefficients
and resulting sample scores, (3) improve power via semi-supervised analysis
when not all class labels are available, and (4) automatically determine a
penalty tuning parameter within the model-based framework. R code to perform
Bayesian DWD is available at https://github.com/lockEF/BayesianDWD .
- Abstract(参考訳): 距離重み付き識別(DWD)は、高次元データを用いた分類タスクに特に適した線形識別法である。
DWD係数は直観的な目的関数を最小限に抑え、最先端の最適化技術を用いて非常に効率的に解ける。
しかし、dwdはまだ統計推論のモデルベースフレームワークに組み込まれていない。
本稿では,dwdが,クラス確率に対する特定のリンク関数と係数に対する縮小誘導的固有事前分布から生じる,適切なベイズ後方分布のモードを同定することを示す。
我々は,このベイズ的枠組みの下での真の後方からシミュレートする,比較的効率的なマルコフ連鎖モンテカルロ(mcmc)アルゴリズムについて述べる。
後肢が漸近的に正常であることを示し、その限界分布の平均と共分散行列を導出する。
いくつかのシミュレーション研究と乳がんゲノム学への応用を通じて、ベイズによるDWDのアプローチを用いて、(1)よく校正された後続のクラス確率を計算し、(2)DWD係数の不確かさを評価し、結果のサンプルスコア、(3)全てのクラスラベルが利用可能でない場合の半教師付き分析によるパワー向上、(4)モデルベースのフレームワーク内でのペナルティチューニングパラメータの自動決定について示す。
Bayesian DWDを実行するためのRコードはhttps://github.com/lockEF/BayesianDWD で公開されている。
関連論文リスト
- Rejection via Learning Density Ratios [50.91522897152437]
拒絶による分類は、モデルを予測しないことを許容する学習パラダイムとして現れます。
そこで我々は,事前学習したモデルの性能を最大化する理想的なデータ分布を求める。
私たちのフレームワークは、クリーンでノイズの多いデータセットで実証的にテストされます。
論文 参考訳(メタデータ) (2024-05-29T01:32:17Z) - Dirichlet-Based Prediction Calibration for Learning with Noisy Labels [40.78497779769083]
雑音ラベルによる学習はディープニューラルネットワーク(DNN)の一般化性能を著しく損なう
既存のアプローチでは、損失補正やサンプル選択手法によってこの問題に対処している。
そこで我々は,textitDirichlet-based Prediction (DPC) 法を解法として提案する。
論文 参考訳(メタデータ) (2024-01-13T12:33:04Z) - Robust Outlier Rejection for 3D Registration with Variational Bayes [70.98659381852787]
我々は、ロバストアライメントのための新しい変分非局所ネットワークベース外乱除去フレームワークを開発した。
そこで本稿では, 投票に基づく不整合探索手法を提案し, 変換推定のための高品質な仮説的不整合をクラスタリングする。
論文 参考訳(メタデータ) (2023-04-04T03:48:56Z) - A Targeted Accuracy Diagnostic for Variational Approximations [8.969208467611896]
変分推論(VI)はマルコフ・チェイン・モンテカルロ(MCMC)の魅力的な代替品である
既存の方法は、全変分分布の品質を特徴付ける。
配電近似精度(TADDAA)のためのTArgeted診断法を提案する。
論文 参考訳(メタデータ) (2023-02-24T02:50:18Z) - Robust Gaussian Process Regression with Huber Likelihood [2.7184224088243365]
本稿では,ハマー確率分布として表される観測データの可能性を考慮した,ガウス過程フレームワークにおけるロバストなプロセスモデルを提案する。
提案モデルでは、予測統計に基づく重みを用いて、残差を拡大し、潜伏関数推定における垂直外れ値と悪レバレッジ点の影響を限定する。
論文 参考訳(メタデータ) (2023-01-19T02:59:33Z) - Robust computation of optimal transport by $\beta$-potential
regularization [79.24513412588745]
最適輸送(OT)は、確率分布間の差を測定する機械学習分野で広く使われているツールである。
我々は、いわゆる$beta$-divergenceに付随するベータポテンシャル項でOTを正規化することを提案する。
提案アルゴリズムで計算した輸送行列は,外乱が存在する場合でも確率分布を頑健に推定するのに役立つことを実験的に実証した。
論文 参考訳(メタデータ) (2022-12-26T18:37:28Z) - Approximate Bayesian Computation via Classification [0.966840768820136]
近似計算(ABC: Approximate Computation)は、計算が難しいがシミュレーションが容易な複雑なモデルにおいて、統計的推論を可能にする。
ABCは、実データとシミュレーションデータの要約統計を比較するアセプション/リジェクト機構により、後部分布に対するカーネル型近似を構築する。
ABCの受け入れしきい値を必要としない指数重み付け方式と同様に、従来のアセプション/リジェクトカーネルも考慮する。
論文 参考訳(メタデータ) (2021-11-22T20:07:55Z) - Scalable Marginal Likelihood Estimation for Model Selection in Deep
Learning [78.83598532168256]
階層型モデル選択は、推定困難のため、ディープラーニングではほとんど使われない。
本研究は,検証データが利用できない場合,限界的可能性によって一般化が向上し,有用であることを示す。
論文 参考訳(メタデータ) (2021-04-11T09:50:24Z) - A Unified Joint Maximum Mean Discrepancy for Domain Adaptation [73.44809425486767]
本論文は,最適化が容易なjmmdの統一形式を理論的に導出する。
統合JMMDから、JMMDは分類に有利な特徴ラベル依存を低下させることを示す。
本稿では,その依存を促進する新たなmmd行列を提案し,ラベル分布シフトにロバストな新しいラベルカーネルを考案する。
論文 参考訳(メタデータ) (2021-01-25T09:46:14Z) - Unlabelled Data Improves Bayesian Uncertainty Calibration under
Covariate Shift [100.52588638477862]
後続正則化に基づく近似ベイズ推定法を開発した。
前立腺癌の予後モデルを世界規模で導入する上で,本手法の有用性を実証する。
論文 参考訳(メタデータ) (2020-06-26T13:50:19Z) - Bayesian Neural Network via Stochastic Gradient Descent [0.0]
本稿では,勾配推定手法を用いてベイズニューラルネットワークに勾配推定を適用する方法を示す。
我々の研究はベイジアンニューラルネットワークを用いた回帰手法のこれまでの状況を大きく上回っている。
論文 参考訳(メタデータ) (2020-06-04T18:33:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。