論文の概要: Rarity of Singletons Matters & Supplementary Materials
- arxiv url: http://arxiv.org/abs/2610.22604v1
- Date: Thu, 15 Oct 2026 19:57:45 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-20 00:56:07.654457
- Title: Rarity of Singletons Matters & Supplementary Materials
- Title(参考訳): シングルトン・サプリメント材料の動向
- Abstract要約: 小さなサンプルでは、希少な占有統計は高度に変動し、古典的推定器はサンプリング変動に敏感であり、潜在的に信頼できない。
本稿では、この感度を明示的に定量化し、従来の欠落量および未知種推定器を適応的に正規化する脆弱性認識(FA)フレームワークを提案する。
- 参考スコア(独自算出の注目度): 0.8399688944263844
- License: http://creativecommons.org/publicdomain/zero/1.0/
- Abstract: Estimating missing-mass and unseen-species counts from finite samples relies heavily on rare-event occupancy statistics, particularly singletons. In small-sample regimes, these statistics can be highly variable, making classical estimators sensitive to sampling fluctuations and potentially unreliable. We propose a fragility-aware (FA) framework that explicitly quantifies this sensitivity and adaptively regularizes conventional missing-mass and unseen-species estimators. Using singleton-based fragility measures derived from probability mass and occupancy counts, we formulate an entropy--Kullback--Leibler (KL) optimization that adjusts the reliance on base estimates according to their fragility. The resulting objectives are strictly concave, admit unique closed-form solutions, and require no Poissonization or asymptotic approximations. The framework provides a lightweight correction to classical estimators, including Good--Turing and Good--Toulmin, while reducing reliance on potentially unstable rare-event statistics. Across 360 experimental configurations spanning synthetic distributions and real-world language corpora, our method remains competitive in stable regimes while improving estimation accuracy and stability in fragmented, long-tailed, and small-sample settings. The findings demonstrate that accounting for the fragility of rare observations can improve the reliability of inference about unobserved species and their associated probability mass.
- Abstract(参考訳): 不足質量と見えない種を有限標本から推定することは、希少な職業統計、特にシングルトンに大きく依存している。
小さなサンプル状態では、これらの統計は高度に変動し、古典的な推定器は変動のサンプリングに敏感であり、潜在的に信頼できない。
本稿では、この感度を明示的に定量化し、従来の欠落量および未知種推定器を適応的に正規化する脆弱性認識(FA)フレームワークを提案する。
確率質量および占有数から導かれるシングルトンに基づく不安定度測定を用いて、その脆弱度に応じてベース推定に依存するエントロピー-カルバック-リーブラー(KL)最適化を定式化する。
得られた目的は厳密な凹凸であり、ユニークな閉形式解を認め、ポアソン化や漸近近似を必要としない。
このフレームワークは、グッドチューリング(Good-Turing)やグッドトゥールミン(Good-Toulmin)などの古典的推定器に軽量な修正を提供する。
合成分布と実世界の言語コーパスにまたがる360度実験構成において,本手法は安定な状況下での競争力を維持しつつ,断片化・長尾化・小サンプル設定における推定精度と安定性を改善した。
その結果、希少な観測の脆弱さを考慮すれば、観測されていない種とその関連する確率質量に関する推論の信頼性が向上することが示された。
関連論文リスト
- Nonparametric Goodness-of-fit Testing under Covariate Shift [4.3686879183724665]
分布ミスマッチは、目標ソース密度比上の有界モーメント条件またはサブ指数テール条件によって定量化される。
本手法は,重み付けされたカーネルリッジ回帰と乗算ブートストラップを組み合わせることで,回帰関数に対する信頼セットを構築する。
適切な演算子互換条件下では、結果の信頼集合の漸近的妥当性と鋭さが証明される。
論文 参考訳(メタデータ) (2026-08-05T13:51:43Z) - Distributionally Faithful Imputation via Positive Semi-Definite Kernel Density Estimation [55.47411235954028]
マスク観測による密度推定では,不規則に不規則に不規則な計算を行う。
我々は,ニュートン内点法で解ける閉じた形状の辺縁を持つ凸型経験的リスク問題を得る。
結果のPSDインプットモデルでは、同一の入射密度から単一および多重インプットが得られる。
論文 参考訳(メタデータ) (2026-07-08T15:51:05Z) - ARC: Adaptive Robust Joint State and Covariance Estimation [42.045109659898465]
センサの測定は、外れ値と非ガウスノイズによって頻繁に破壊される。
センサデータのこれらの不完全性は、古典的状態推定器がバイアス付きで信頼性の低い状態と不確実性の推定を発生させる可能性がある。
本稿では,標準対応型適応ロバスト損失と反復重み付けされたLast-Squares状態更新を組み合わせたBlock-Coordinate Descentフレームワークを提案する。
論文 参考訳(メタデータ) (2026-06-18T16:09:50Z) - Penalized Empirical Likelihood for Doubly Robust Causal Inference under Contamination in High Dimensions [0.720409153108429]
低サンプルサイズ方程式における平均処理効果を2倍頑健に推定する手法を提案する。
提案した信頼区間は, 競合する推定値と比較して効率がよいことを示す。
論文 参考訳(メタデータ) (2025-07-23T11:58:54Z) - Enhanced Generative Model Evaluation with Clipped Density and Coverage [30.08046476442414]
Clipped DensityとClipped Coverageという2つの新しい指標を紹介します。
クラッピング密度とクラッピング被覆は、ロバスト性、感度、解釈可能性の観点から既存の手法よりも優れていた。
論文 参考訳(メタデータ) (2025-07-02T14:40:00Z) - COME: Test-time adaption by Conservatively Minimizing Entropy [45.689829178140634]
保守的に最小化されるエントロピー (COME) は従来のエントロピー (EM) の代替品である
COMEはモデル予測よりもディリクレ事前分布を特徴付けることによって、不確実性を明示的にモデル化する。
我々はCOMEが一般的なベンチマークで最先端のパフォーマンスを達成することを示す。
論文 参考訳(メタデータ) (2024-10-12T09:20:06Z) - The Decaying Missing-at-Random Framework: Model Doubly Robust Causal Inference with Partially Labeled Data [8.916614661563893]
因果推論を両立させるために,MARフレームワークの欠落と関連するアプローチを導入する。
これはラベル付け機構における選択バイアスとラベル付きグループとラベルなしグループの極端な不均衡に同時に対処する。
因果関係の堅牢性を確保するため,平均治療効果に対するバイアス低減SS推定器を提案する。
論文 参考訳(メタデータ) (2023-05-22T07:37:12Z) - Monotonicity and Double Descent in Uncertainty Estimation with Gaussian
Processes [52.92110730286403]
限界確率はクロスバリデーションの指標を思い起こさせるべきであり、どちらもより大きな入力次元で劣化すべきである、と一般的に信じられている。
我々は,ハイパーパラメータをチューニングすることにより,入力次元と単調に改善できることを証明した。
また、クロスバリデーションの指標は、二重降下の特徴である質的に異なる挙動を示すことも証明した。
論文 参考訳(メタデータ) (2022-10-14T08:09:33Z) - Dense Uncertainty Estimation via an Ensemble-based Conditional Latent
Variable Model [68.34559610536614]
我々は、アレータリック不確実性はデータの固有の特性であり、偏見のないオラクルモデルでのみ正確に推定できると論じる。
そこで本研究では,軌道不確実性推定のためのオラクルモデルを近似するために,列車時の新しいサンプリングと選択戦略を提案する。
以上の結果から,提案手法は精度の高い決定論的結果と確実な不確実性推定の両方を達成できることが示唆された。
論文 参考訳(メタデータ) (2021-11-22T08:54:10Z) - Robust Variable Selection and Estimation Via Adaptive Elastic Net
S-Estimators for Linear Regression [0.0]
同時変数選択と係数推定のための新しい頑健な正規化推定器を提案する。
適応PENSEは、残基のスケールに関する事前の知識のないオラクル特性を持つ。
シミュレーションおよび実データ集合に関する数値的研究は、広範囲な設定において優れた有限サンプル性能を示す。
論文 参考訳(メタデータ) (2021-07-07T16:04:08Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。