論文の概要: LSTSVR-PI: Least square twin support vector regression with privileged
information
- arxiv url: http://arxiv.org/abs/2312.02596v2
- Date: Wed, 21 Feb 2024 15:22:07 GMT
- ステータス: 処理完了
- システム内更新日: 2024-02-22 19:37:38.012144
- Title: LSTSVR-PI: Least square twin support vector regression with privileged
information
- Title(参考訳): LSTSVR-PI:特権情報を用いた最小二乗支援ベクトル回帰
- Authors: Anuradha Kumari, M. Tanveer
- Abstract要約: 特権情報を用いた最小二乗支援ベクトル回帰(LSTSVR-PI)を提案する。
これはLUPIパラダイムを統合し、最小二乗サポートベクトル回帰に追加の情報ソースを利用する。
提案モデルは,LUPIの現代パラダイムと古典的LSTSVRのギャップを埋める。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: In an educational setting, a teacher plays a crucial role in various
classroom teaching patterns. Similarly, mirroring this aspect of human
learning, the learning using privileged information (LUPI) paradigm introduces
additional information to instruct learning models during the training stage. A
different approach to train the twin variant of the regression model is
provided by the new least square twin support vector regression using
privileged information (LSTSVR-PI), which integrates the LUPI paradigm to
utilize additional sources of information into the least square twin support
vector regression. The proposed LSTSVR-PI solves system of linear equations
which adds up to the efficiency of the model. Further, we also establish a
generalization error bound based on the Rademacher complexity of the proposed
model and incorporate the structural risk minimization principle. The proposed
LSTSVR-PI fills the gap between the contemporary paradigm of LUPI and classical
LSTSVR. Further, to assess the performance of the proposed model, we conduct
numerical experiments along with the baseline models across various
artificially generated and real-world datasets. The various experiments and
statistical analysis infer the superiority of the proposed model. Moreover, as
an application, we conduct experiments on time series datasets, which results
in the superiority of the proposed LSTSVR-PI.
- Abstract(参考訳): 教育環境では、教師は様々な教室の授業パターンにおいて重要な役割を果たす。
同様に、人間の学習のこの側面を反映して、特権情報(LUPI)パラダイムを用いた学習は、トレーニング段階で学習モデルを教えるための追加情報を導入する。
回帰モデルのツイン変種を訓練するための別のアプローチとして、特権情報(lstsvr-pi)を用いた新しい最小二乗支持ベクトル回帰(lstsvr-pi)がある。
提案した LSTSVR-PI はモデルの効率を高める線形方程式の系を解く。
さらに,提案モデルのRademacher複雑性に基づいた一般化誤差を確立し,構造的リスク最小化の原理を取り入れた。
LSTSVR-PIは、LUPIの現代パラダイムと古典的なLSTSVRのギャップを埋める。
さらに,提案モデルの性能を評価するため,様々な人工的および実世界のデータセットのベースラインモデルとともに数値実験を行った。
様々な実験と統計解析により,提案モデルの優越性が推察された。
さらに,本手法の適用例として,時系列データセットを用いて実験を行い,提案したLSTSVR-PIの優位性を示す。
関連論文リスト
- Getting More Juice Out of the SFT Data: Reward Learning from Human Demonstration Improves SFT for LLM Alignment [65.15914284008973]
我々は、報酬モデルと政策モデルを同時に構築するために、逆強化学習(IRL)技術を活用することを提案する。
提案アルゴリズムはIRL問題の定常解に収束することを示す。
その結果,アライメントプロセス全体を通じて報酬学習を活用することは有益であることが示唆された。
論文 参考訳(メタデータ) (2024-05-28T07:11:05Z) - Federated Learning with Projected Trajectory Regularization [65.6266768678291]
フェデレーション学習は、ローカルデータを共有せずに、分散クライアントから機械学習モデルの共同トレーニングを可能にする。
連合学習における重要な課題の1つは、クライアントにまたがる識別できない分散データを扱うことである。
本稿では,データ問題に対処するための予測軌道正則化(FedPTR)を備えた新しいフェデレーション学習フレームワークを提案する。
論文 参考訳(メタデータ) (2023-12-22T02:12:08Z) - Nonparametric Linear Feature Learning in Regression Through Regularisation [0.0]
連立線形特徴学習と非パラメトリック関数推定のための新しい手法を提案する。
代替最小化を用いることで、データを反復的に回転させ、先頭方向との整合性を改善する。
提案手法の予測リスクは,最小限の仮定と明示的なレートで最小限のリスクに収束することを確認した。
論文 参考訳(メタデータ) (2023-07-24T12:52:55Z) - Representation Transfer Learning via Multiple Pre-trained models for
Linear Regression [3.5788754401889014]
サンプルが少ないデータ領域(ターゲット)で線形回帰モデルを学習する問題を考察する。
学習を支援するために、私たちは、潜在的に異なるデータドメインでトレーニングされた事前訓練された回帰モデルセットを提供しています。
対象モデルを構築するための表現伝達に基づく学習手法を提案する。
論文 参考訳(メタデータ) (2023-05-25T19:35:24Z) - Reinforcement Learning for Topic Models [3.42658286826597]
本稿では,ProdLDAにおける変分オートエンコーダを連続行動空間強化学習ポリシーに置き換えることにより,トピックモデリングに強化学習手法を適用した。
ニューラルネットワークアーキテクチャの近代化、ELBO損失の重み付け、コンテキスト埋め込みの使用、トピックの多様性と一貫性の計算による学習プロセスの監視など、いくつかの変更を導入している。
論文 参考訳(メタデータ) (2023-05-08T16:41:08Z) - EmbedDistill: A Geometric Knowledge Distillation for Information
Retrieval [83.79667141681418]
大規模なニューラルモデル(トランスフォーマーなど)は、情報検索(IR)のための最先端のパフォーマンスを達成する
本研究では,大規模教師モデルで学習したクエリとドキュメント間の相対的幾何を利用した新しい蒸留手法を提案する。
提案手法は, 両エンコーダ (DE) とクロスエンコーダ (CE) の2種類の教師モデルから, 95~97%の教師性能を維持できる1/10の非対称な学生への蒸留に成功した。
論文 参考訳(メタデータ) (2023-01-27T22:04:37Z) - Fitting a Directional Microstructure Model to Diffusion-Relaxation MRI
Data with Self-Supervised Machine Learning [2.8167227950959206]
教師付き学習の魅力的な代替手段として、自己教師型機械学習が登場している。
本稿では,指向性マイクロ構造モデルに適用可能な自己教師型機械学習モデルを実証する。
提案手法は, パラメータ推定と計算時間において, 通常の非線形最小二乗整合と比較して明らかに改善されている。
論文 参考訳(メタデータ) (2022-10-05T15:51:39Z) - Virtual embeddings and self-consistency for self-supervised learning [43.086696088061416]
TriMixは、線形データを通じて仮想埋め込みを生成する自己教師型学習の新しい概念である。
我々は,TriMixを2.71%,0.41%改善した8つのベンチマークデータセットで検証した。
論文 参考訳(メタデータ) (2022-06-13T10:20:28Z) - Self-Supervised Class Incremental Learning [51.62542103481908]
既存のクラスインクリメンタルラーニング(CIL)手法は、データラベルに敏感な教師付き分類フレームワークに基づいている。
新しいクラスデータに基づいて更新する場合、それらは破滅的な忘れがちである。
本稿では,SSCILにおける自己指導型表現学習のパフォーマンスを初めて考察する。
論文 参考訳(メタデータ) (2021-11-18T06:58:19Z) - MINIMALIST: Mutual INformatIon Maximization for Amortized Likelihood
Inference from Sampled Trajectories [61.3299263929289]
シミュレーションベースの推論は、その可能性が実際に計算できない場合でもモデルのパラメータを学習することができる。
あるクラスのメソッドは、異なるパラメータでシミュレートされたデータを使用して、確率とエビデンス比の償却推定器を推定する。
モデルパラメータとシミュレーションデータ間の相互情報の観点から,本手法が定式化可能であることを示す。
論文 参考訳(メタデータ) (2021-06-03T12:59:16Z) - Few-Shot Named Entity Recognition: A Comprehensive Study [92.40991050806544]
マルチショット設定のモデル一般化能力を向上させるための3つの手法を検討する。
ラベル付きデータの比率の異なる10の公開nerデータセットについて経験的比較を行う。
マルチショットとトレーニングフリーの両方の設定で最新の結果を作成します。
論文 参考訳(メタデータ) (2020-12-29T23:43:16Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。