論文の概要: SparseIDS: Learning Packet Sampling with Reinforcement Learning
- arxiv url: http://arxiv.org/abs/2002.03872v3
- Date: Mon, 4 May 2020 15:22:43 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-02 08:28:30.273920
- Title: SparseIDS: Learning Packet Sampling with Reinforcement Learning
- Title(参考訳): SparseIDS:強化学習によるパケットサンプリング学習
- Authors: Maximilian Bachl, Fares Meghdouri, Joachim Fabini, Tanja Zseby
- Abstract要約: リカレントニューラルネットワーク(RNN)は,ネットワークデータに対する侵入検知システム(IDS)の構築に有用であることが示されている。
SparseIDSと呼ばれる新しい強化学習(Reinforcement Learning, RL)ベースのアプローチを用いることで, 使用パケット数を3分の1以上削減できることを示す。
- 参考スコア(独自算出の注目度): 1.978587235008588
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Recurrent Neural Networks (RNNs) have been shown to be valuable for
constructing Intrusion Detection Systems (IDSs) for network data. They allow
determining if a flow is malicious or not already before it is over, making it
possible to take action immediately. However, considering the large number of
packets that has to be inspected, for example in cloud/fog and edge computing,
the question of computational efficiency arises. We show that by using a novel
Reinforcement Learning (RL)-based approach called SparseIDS, we can reduce the
number of consumed packets by more than three fourths while keeping
classification accuracy high. To minimize the computational expenses of the
RL-based sampling we show that a shared neural network can be used for both the
classifier and the RL logic. Thus, no additional resources are consumed by the
sampling in deployment. Comparing to various other sampling techniques,
SparseIDS consistently achieves higher classification accuracy by learning to
sample only relevant packets. A major novelty of our RL-based approach is that
it can not only skip up to a predefined maximum number of samples like other
approaches proposed in the domain of Natural Language Processing but can even
skip arbitrarily many packets in one step. This enables saving even more
computational resources for long sequences. Inspecting SparseIDS's behavior of
choosing packets shows that it adopts different sampling strategies for
different attack types and network flows. Finally we build an automatic
steering mechanism that can guide SparseIDS in deployment to achieve a desired
level of sparsity.
- Abstract(参考訳): リカレントニューラルネットワーク(RNN)は,ネットワークデータに対する侵入検知システム(IDS)の構築に有用であることが示されている。
フローが終了する前に悪意があるかどうかを判断でき、即座にアクションを実行できる。
しかし、例えば cloud/fog や edge computing で検査しなければならないパケットの数を考えると、計算効率の問題が発生する。
SparseIDSと呼ばれる新しい強化学習(Reinforcement Learning, RL)ベースのアプローチを用いることで, 分類精度を高く保ちながら, 消費パケット数を3/4以上削減できることを示す。
RLに基づくサンプリングの計算コストを最小化するために、分類器とRL論理の両方に共有ニューラルネットワークを使用できることを示す。
したがって、デプロイメントのサンプリングによって追加のリソースが消費されることはない。
他の様々なサンプリング技術と比較して、SparseIDSは、関連するパケットのみをサンプリングすることを学ぶことによって、高い分類精度を達成する。
我々のRLベースのアプローチの大きな特徴は、自然言語処理の領域で提案されている他のアプローチと同様に、事前に定義された最大数のサンプルをスキップできるだけでなく、任意の数のパケットを1ステップでスキップできることです。
これにより、長いシーケンスでより多くの計算リソースを節約できる。
SparseIDSのパケット選択動作を調べると、異なる攻撃タイプとネットワークフローに対して異なるサンプリング戦略を採用することが分かる。
最後に、デプロイ中のSparseIDSをガイドして所望の間隔を実現する自動ステアリングメカニズムを構築します。
関連論文リスト
- Amortizing intractable inference in large language models [56.92471123778389]
難治性後部分布のサンプルとして, 償却ベイズ推定を用いる。
我々は,LLMファインチューニングの分散マッチングパラダイムが,最大習熟の代替となることを実証的に実証した。
重要な応用として、チェーン・オブ・ソート推論を潜在変数モデリング問題として解釈する。
論文 参考訳(メタデータ) (2023-10-06T16:36:08Z) - Sampling weights of deep neural networks [1.2370077627846041]
完全に接続されたニューラルネットワークの重みとバイアスに対して,効率的なサンプリングアルゴリズムと組み合わせた確率分布を導入する。
教師付き学習環境では、内部ネットワークパラメータの反復最適化や勾配計算は不要である。
サンプルネットワークが普遍近似器であることを証明する。
論文 参考訳(メタデータ) (2023-06-29T10:13:36Z) - A Maximum Log-Likelihood Method for Imbalanced Few-Shot Learning Tasks [3.2895195535353308]
数ショットアーキテクチャのための新しい最大ログ類似度指標を提案する。
提案手法は,従来の類似度指標よりも優れた性能を実現することを示す。
また,提案アルゴリズムは,評価データが不均衡である場合に,最先端のトランスダクティブな数ショット性能を実現することを示す。
論文 参考訳(メタデータ) (2022-11-26T21:31:00Z) - Layer Ensembles [95.42181254494287]
本稿では,ネットワークの各層に対する独立なカテゴリ分布の集合を考慮した不確実性推定手法を提案する。
その結果,メモリと実行時間が少なくなるモデルが得られた。
論文 参考訳(メタデータ) (2022-10-10T17:52:47Z) - Towards Automated Imbalanced Learning with Deep Hierarchical
Reinforcement Learning [57.163525407022966]
不均衡学習はデータマイニングにおいて基本的な課題であり、各クラスにトレーニングサンプルの不均等な比率が存在する。
オーバーサンプリングは、少数民族のための合成サンプルを生成することによって、不均衡な学習に取り組む効果的な手法である。
我々は,異なるレベルの意思決定を共同で最適化できる自動オーバーサンプリングアルゴリズムであるAutoSMOTEを提案する。
論文 参考訳(メタデータ) (2022-08-26T04:28:01Z) - COAST: COntrollable Arbitrary-Sampling NeTwork for Compressive Sensing [27.870537087888334]
本研究では,任意のサンプリング(サンプリング行列を含む)の問題を1つのモデルで解くために,COAST(Arbitrary-Sampling neTwork)を提案する。
COASTは1つのモデルで任意のサンプリング行列を処理でき、高速で最先端のパフォーマンスを実現することができる。
論文 参考訳(メタデータ) (2021-07-15T10:05:00Z) - Multi-Source Domain Adaptation for Object Detection [52.87890831055648]
我々は、Divide-and-Merge Spindle Network (DMSN)と呼ばれる、より高速なR-CNNベースのフレームワークを提案する。
DMSNはドメイン非ネイティブを同時に強化し、識別力を維持することができる。
擬似目標部分集合の最適パラメータを近似する新しい擬似学習アルゴリズムを開発した。
論文 参考訳(メタデータ) (2021-06-30T03:17:20Z) - Coded Stochastic ADMM for Decentralized Consensus Optimization with Edge
Computing [113.52575069030192]
セキュリティ要件の高いアプリケーションを含むビッグデータは、モバイルデバイスやドローン、車両など、複数の異種デバイスに収集され、格納されることが多い。
通信コストとセキュリティ要件の制限のため、核融合センターにデータを集約するのではなく、分散的に情報を抽出することが最重要となる。
分散エッジノードを介してデータを局所的に処理するマルチエージェントシステムにおいて,モデルパラメータを学習する問題を考える。
分散学習モデルを開発するために,乗算器アルゴリズムの最小バッチ交互方向法(ADMM)のクラスについて検討した。
論文 参考訳(メタデータ) (2020-10-02T10:41:59Z) - Sequential Density Ratio Estimation for Simultaneous Optimization of
Speed and Accuracy [11.470070927586017]
本稿では,この2つの障害を克服する深層ニューラルネットワークに基づくSPRTアルゴリズムであるSPRT-TANDEMを提案する。
1つのオリジナルと2つの公開ビデオデータベースでのテストでは、SPRT-TANDEMは他のベースラインよりも統計的にかなり優れた分類精度を達成する。
論文 参考訳(メタデータ) (2020-06-10T01:05:00Z) - Ensemble Wrapper Subsampling for Deep Modulation Classification [70.91089216571035]
受信した無線信号のサブサンプリングは、ハードウェア要件と信号処理アルゴリズムの計算コストを緩和するために重要である。
本稿では,無線通信システムにおけるディープラーニングを用いた自動変調分類のためのサブサンプリング手法を提案する。
論文 参考訳(メタデータ) (2020-05-10T06:11:13Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。