論文の概要: A Theory of Optimistically Universal Online Learnability for General Concept Classes
- arxiv url: http://arxiv.org/abs/2501.08551v1
- Date: Wed, 15 Jan 2025 03:20:16 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-01-16 15:53:24.912685
- Title: A Theory of Optimistically Universal Online Learnability for General Concept Classes
- Title(参考訳): 一般概念授業における最適ユニバーサルオンライン学習可能性の理論
- Authors: Steve Hanneke, Hongao Wang,
- Abstract要約: 我々は、0, 1$ラベルで楽観的にオンライン学習可能な概念クラスの完全な特徴付けを提供する。
楽観的に普遍的なオンライン学習の概念は[Hanneke, 2021]で定義され, 最小限の仮定の下で学習可能性を理解する。
- 参考スコア(独自算出の注目度): 15.830099254570955
- License:
- Abstract: We provide a full characterization of the concept classes that are optimistically universally online learnable with $\{0, 1\}$ labels. The notion of optimistically universal online learning was defined in [Hanneke, 2021] in order to understand learnability under minimal assumptions. In this paper, following the philosophy behind that work, we investigate two questions, namely, for every concept class: (1) What are the minimal assumptions on the data process admitting online learnability? (2) Is there a learning algorithm which succeeds under every data process satisfying the minimal assumptions? Such an algorithm is said to be optimistically universal for the given concept class. We resolve both of these questions for all concept classes, and moreover, as part of our solution, we design general learning algorithms for each case. Finally, we extend these algorithms and results to the agnostic case, showing an equivalence between the minimal assumptions on the data process for learnability in the agnostic and realizable cases, for every concept class, as well as the equivalence of optimistically universal learnability.
- Abstract(参考訳): 我々は、$\{0, 1\}$ラベルで楽観的にオンライン学習可能な概念クラスの完全な特徴づけを提供する。
楽観的に普遍的なオンライン学習の概念は[Hanneke, 2021]で定義され, 最小限の仮定の下で学習可能性を理解する。
本稿では、その研究の背景にある哲学、すなわち、すべての概念クラスについて、2つの疑問を考察する。(1)オンライン学習能力を認めるデータプロセスに関する最小限の仮定は、どのようなものか?
(2)最小限の仮定を満たすすべてのデータプロセスで成功する学習アルゴリズムはあるか?
そのようなアルゴリズムは、与えられた概念クラスに対して楽観的に普遍的であると言われる。
これら2つの課題を,すべての概念クラスに対して解決し,さらに,ソリューションの一部として,ケース毎に汎用的な学習アルゴリズムを設計する。
最後に、これらのアルゴリズムと結果は、各概念クラスにおける学習可能性に関するデータプロセス上の最小仮定と、楽観的に普遍的な学習可能性の同値性を示す。
関連論文リスト
- Probably Approximately Precision and Recall Learning [62.912015491907994]
精度とリコールは機械学習の基本的な指標である。
一方的なフィードバック – トレーニング中にのみ肯定的な例が観察される – は,多くの実践的な問題に固有のものだ。
PAC学習フレームワークでは,各仮説をグラフで表現し,エッジは肯定的な相互作用を示す。
論文 参考訳(メタデータ) (2024-11-20T04:21:07Z) - Coding for Intelligence from the Perspective of Category [66.14012258680992]
符号化の対象はデータの圧縮と再構成、インテリジェンスである。
最近の傾向は、これらの2つの分野の潜在的均一性を示している。
本稿では,カテゴリ理論の観点から,インテリジェンスのためのコーディングの新たな問題を提案する。
論文 参考訳(メタデータ) (2024-07-01T07:05:44Z) - Ticketed Learning-Unlearning Schemes [57.89421552780526]
そこで我々は,学習のためのチケット付きモデルを提案する。
広義のコンセプトクラスに対して,空間効率のよいチケット付き学習スキームを提供する。
論文 参考訳(メタデータ) (2023-06-27T18:54:40Z) - Online Learning and Disambiguations of Partial Concept Classes [0.7264378254137809]
最近の記事で、Alon、Hanneke、Holzman、Moranは、部分的な概念のクラスの学習可能性を研究する統一的なフレームワークを紹介した。
彼らは、PAC学習ではそうではないことを示したが、オンラインの学習可能性というより強い概念のために、問題を解き放った。
我々は、オンライン学習可能な部分概念のクラスを構築することでこの問題を解決するが、全体概念のクラスへの拡張はオンライン学習可能ではない。
論文 参考訳(メタデータ) (2023-03-30T17:46:50Z) - Towards a Holistic Understanding of Mathematical Questions with
Contrastive Pre-training [65.10741459705739]
本稿では,数学的問題表現,すなわち QuesCo に対する対照的な事前学習手法を提案する。
まず、コンテンツレベルと構造レベルを含む2段階の質問強化を設計し、類似した目的で文字通り多様な質問ペアを生成する。
そこで我々は,知識概念の階層的情報を完全に活用するために,知識階層を意識したランク戦略を提案する。
論文 参考訳(メタデータ) (2023-01-18T14:23:29Z) - Bayesian Learning for Neural Networks: an algorithmic survey [95.42181254494287]
この自己完結型調査は、ベイズ学習ニューラルネットワークの原理とアルゴリズムを読者に紹介する。
アクセシブルで実践的な視点からこのトピックを紹介します。
論文 参考訳(メタデータ) (2022-11-21T21:36:58Z) - Multiclass Learnability Beyond the PAC Framework: Universal Rates and
Partial Concept Classes [31.2676304636432]
本研究では,有界なラベル数$k$の多クラス分類の問題について,実現可能な設定で検討する。
従来のPACモデルを(a)分布依存学習率、(b)データ依存仮定下での学習率に拡張する。
論文 参考訳(メタデータ) (2022-10-05T14:36:27Z) - The no-free-lunch theorems of supervised learning [0.0]
no-free-lunch定理は、あらゆる可能な機械学習アルゴリズムが正当性を欠いているという懐疑的な結論を促進する。
多くの標準学習アルゴリズムはモデルに依存して理解されるべきである。
論文 参考訳(メタデータ) (2022-02-09T15:24:30Z) - Universal Online Learning: an Optimistically Universal Learning Rule [0.0]
本研究では,非i.d.プロセスを用いたユニバーサルオンライン学習の課題について検討する。
k-nearest neighbor algorithm (kNN) は楽観的に普遍的ではなく, 1NN の新たな変種を示す。
論文 参考訳(メタデータ) (2022-01-16T02:13:47Z) - Concept Learners for Few-Shot Learning [76.08585517480807]
本研究では,人間の解釈可能な概念次元に沿って学習することで,一般化能力を向上させるメタ学習手法であるCOMETを提案する。
我々は,細粒度画像分類,文書分類,セルタイプアノテーションなど,さまざまな領域からの少数ショットタスクによるモデルの評価を行った。
論文 参考訳(メタデータ) (2020-07-14T22:04:17Z) - On Learnability under General Stochastic Processes [20.22409095000365]
一般の非イド過程における統計的学習は、未熟である。
一般プロセスの下で関数クラスの学習可能性に関する2つの自然な概念を提供する。
我々の結果は二項分類と回帰の両方に当てはまる。
論文 参考訳(メタデータ) (2020-05-15T15:49:23Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。