論文の概要: Fast Distributed Bandits for Online Recommendation Systems
- arxiv url: http://arxiv.org/abs/2007.08061v1
- Date: Thu, 16 Jul 2020 01:18:08 GMT
- ステータス: 処理完了
- システム内更新日: 2022-11-09 23:59:57.001706
- Title: Fast Distributed Bandits for Online Recommendation Systems
- Title(参考訳): オンラインレコメンデーションシステムのための高速分散バンディット
- Authors: Kanak Mahadik, Qingyun Wu, Shuai Li, and Amit Sabne
- Abstract要約: コンテキスト帯域幅アルゴリズムは、コンテンツの人気が急速に変化するレコメンデーションシステムで一般的に使用される。
近年,ユーザ間のクラスタリングやソーシャル構造を学習するリコメンデーションアルゴリズムは,高いレコメンデーション精度を示した。
最先端の分散バンディットアルゴリズム(DCCB)は、分散ワーカー間で情報を共有するためにピアツーピアのネットワークに依存している。
本稿では,DistCLUBと呼ばれる分散帯域幅に基づく新しいアルゴリズムを提案する。
- 参考スコア(独自算出の注目度): 22.447455071649852
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Contextual bandit algorithms are commonly used in recommender systems, where
content popularity can change rapidly. These algorithms continuously learn
latent mappings between users and items, based on contexts associated with them
both. Recent recommendation algorithms that learn clustering or social
structures between users have exhibited higher recommendation accuracy.
However, as the number of users and items in the environment increases, the
time required to generate recommendations deteriorates significantly. As a
result, these cannot be deployed in practice. The state-of-the-art distributed
bandit algorithm - DCCB - relies on a peer-to-peer net-work to share
information among distributed workers. However, this approach does not scale
well with the increasing number of users. Furthermore, it suffers from slow
discovery of clusters, resulting in accuracy degradation. To address the above
issues, this paper proposes a novel distributed bandit-based algorithm called
DistCLUB. This algorithm lazily creates clusters in a distributed manner, and
dramatically reduces the network data sharing requirement, achieving high
scalability. Additionally, DistCLUB finds clusters much faster, achieving
better accuracy than the state-of-the-art algorithm. Evaluation over both
real-world benchmarks and synthetic datasets shows that DistCLUB is on average
8.87x faster than DCCB, and achieves 14.5% higher normalized prediction
performance.
- Abstract(参考訳): コンテキスト帯域幅アルゴリズムは、コンテンツの人気が急速に変化するレコメンデーションシステムで一般的に使用される。
これらのアルゴリズムは、ユーザとアイテムの間の潜在的なマッピングを継続的に学習する。
ユーザ間のクラスタリングや社会的構造を学ぶ最近の推奨アルゴリズムは、推奨精度が高い。
しかし,環境におけるユーザ数や項目数の増加に伴い,レコメンデーション作成に必要な時間が著しく低下する。
結果として、これらは実際にデプロイすることはできない。
最先端の分散バンディットアルゴリズム(DCCB)は、分散ワーカー間で情報を共有するためにピアツーピアのネットワークに依存している。
しかし、このアプローチはユーザ数の増加とともにうまくスケールしない。
さらに、クラスターの発見が遅くなり、精度が低下する。
そこで本研究では,DistCLUBと呼ばれる分散帯域ベースアルゴリズムを提案する。
このアルゴリズムは分散的にクラスタを生成し、ネットワークデータ共有要件を劇的に削減し、高いスケーラビリティを実現します。
さらに、DistCLUBはクラスタをはるかに高速に検出し、最先端のアルゴリズムよりも精度が向上する。
実世界のベンチマークと合成データセットによる評価では、DistCLUBはDCCBよりも平均8.87倍速く、正規化予測性能は14.5%向上している。
関連論文リスト
- Accelerating k-Means Clustering with Cover Trees [0.30693357740321775]
表木指数に基づく新しいk-meansアルゴリズムを提案し, オーバーヘッドが比較的低く, 性能も良好である。
木集約と境界に基づくフィルタリングの利点を組み合わせたハイブリッドアルゴリズムを得る。
論文 参考訳(メタデータ) (2024-10-19T14:02:42Z) - The Cascaded Forward Algorithm for Neural Network Training [61.06444586991505]
本稿では,ニューラルネットワークのための新しい学習フレームワークであるCascaded Forward(CaFo)アルゴリズムを提案する。
FFとは異なり、我々のフレームワークは各カスケードブロックのラベル分布を直接出力する。
我々のフレームワークでは、各ブロックは独立して訓練できるので、並列加速度システムに容易に展開できる。
論文 参考訳(メタデータ) (2023-03-17T02:01:11Z) - Sparsity May Cry: Let Us Fail (Current) Sparse Neural Networks Together! [100.19080749267316]
Sparsity May Cry"ベンチマーク(SMC-Bench)は、慎重に計算された4つのタスクと10のデータセットのコレクションである。
SMC-Benchは、よりスケーラブルで一般化可能なスパースアルゴリズムの開発を奨励するように設計されている。
論文 参考訳(メタデータ) (2023-03-03T18:47:21Z) - Genie: A new, fast, and outlier-resistant hierarchical clustering
algorithm [3.7491936479803054]
我々はGenieと呼ばれる新しい階層的クラスタリングリンク基準を提案する。
我々のアルゴリズムは、2つのクラスタを、選択された経済不平等尺度が与えられたしきい値を超えないようにリンクする。
このアルゴリズムのリファレンス実装は、Rのためのオープンソースの'genie'パッケージに含まれている。
論文 参考訳(メタデータ) (2022-09-13T06:42:53Z) - Local Sample-weighted Multiple Kernel Clustering with Consensus
Discriminative Graph [73.68184322526338]
マルチカーネルクラスタリング(MKC)は、ベースカーネルの集合から最適な情報融合を実現するためにコミットされる。
本稿では,新しい局所サンプル重み付きマルチカーネルクラスタリングモデルを提案する。
実験により, LSWMKCはより優れた局所多様体表現を有し, 既存のカーネルやグラフベースのクラスタリングアルゴリズムよりも優れていた。
論文 参考訳(メタデータ) (2022-07-05T05:00:38Z) - Optimal Clustering with Bandit Feedback [57.672609011609886]
本稿では,バンディットフィードバックを用いたオンラインクラスタリングの問題点について考察する。
これは、NPハード重み付きクラスタリング問題をサブルーチンとして解決する必要性を回避するための、シーケンシャルなテストのための新しい停止規則を含む。
合成および実世界のデータセットの広範なシミュレーションを通して、BOCの性能は下界と一致し、非適応的ベースラインアルゴリズムよりも大幅に優れることを示す。
論文 参考訳(メタデータ) (2022-02-09T06:05:05Z) - Fast Density Estimation for Density-based Clustering Methods [3.8972699157287702]
密度に基づくクラスタリングアルゴリズムは、パターン認識や機械学習におけるクラスタの発見に広く利用されている。
密度に基づくアルゴリズムのロバスト性は、隣人を見つけ、時間を要する各点の密度を計算することによって大きく支配される。
本稿では, 高速主成分分析による密度に基づくクラスタリングフレームワークを提案する。
論文 参考訳(メタデータ) (2021-09-23T13:59:42Z) - Scalable Community Detection via Parallel Correlation Clustering [1.5644420658691407]
グラフクラスタリングとコミュニティ検出は、現代のデータマイニングの中心的な問題である。
本稿では,地上の真実に基づいて,高品質なアルゴリズムを設計する。
論文 参考訳(メタデータ) (2021-07-27T04:33:37Z) - Clustering of Big Data with Mixed Features [3.3504365823045044]
我々は混合型の大規模データのための新しいクラスタリングアルゴリズムを開発した。
このアルゴリズムは、比較的低い密度値の外れ値とクラスターを検出することができる。
本研究では,本アルゴリズムが実際に有効であることを示す実験結果を示す。
論文 参考訳(メタデータ) (2020-11-11T19:54:38Z) - Bayesian Optimization with Machine Learning Algorithms Towards Anomaly
Detection [66.05992706105224]
本稿では,ベイズ最適化手法を用いた効果的な異常検出フレームワークを提案する。
ISCX 2012データセットを用いて検討したアルゴリズムの性能を評価する。
実験結果から, 精度, 精度, 低コストアラームレート, リコールの観点から, 提案手法の有効性が示された。
論文 参考訳(メタデータ) (2020-08-05T19:29:35Z) - Learning to Accelerate Heuristic Searching for Large-Scale Maximum
Weighted b-Matching Problems in Online Advertising [51.97494906131859]
バイパルタイトbマッチングはアルゴリズム設計の基本であり、経済市場や労働市場などに広く適用されている。
既存の正確で近似的なアルゴリズムは、通常そのような設定で失敗する。
我々は、以前の事例から学んだ知識を活用して、新しい問題インスタンスを解決するtextttNeuSearcherを提案する。
論文 参考訳(メタデータ) (2020-05-09T02:48:23Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。