論文の概要: Machine Learning Algorithms for Active Monitoring of High Performance
Computing as a Service (HPCaaS) Cloud Environments
- arxiv url: http://arxiv.org/abs/2009.12498v1
- Date: Sat, 26 Sep 2020 01:29:19 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-14 09:11:17.682636
- Title: Machine Learning Algorithms for Active Monitoring of High Performance
Computing as a Service (HPCaaS) Cloud Environments
- Title(参考訳): ハイパフォーマンスコンピューティング・アズ・ア・サービス(HPCaaS)クラウド環境のアクティブモニタリングのための機械学習アルゴリズム
- Authors: Gianluca Longoni (1), Ryan LaMothe (1), Jeremy Teuton (1), Mark
Greaves (1), Nicole Nichols (1), William Smith (1) ((1) Pacific Northwest
National Laboratory)
- Abstract要約: 本稿では,HPCプラットフォームとして構成されたクラウドインフラストラクチャ上で動作するエンジニアリングアプリケーションの実用性について検討する。
この研究で考慮された工学的応用としては、ロスアラモス国立研究所が開発した放射線輸送コードMCNP6、オープンソースの計算流体力学コードOpenFOAM、素数分解に使用される一般数場シーブアルゴリズムCADONFSなどがある。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Cloud computing provides ubiquitous and on-demand access to vast
reconfigurable resources that can meet any computational need. Many service
models are available, but the Infrastructure as a Service (IaaS) model is
particularly suited to operate as a high performance computing (HPC) platform,
by networking large numbers of cloud computing nodes. We used the Pacific
Northwest National Laboratory (PNNL) cloud computing environment to perform our
experiments. A number of cloud computing providers such as Amazon Web Services,
Microsoft Azure, or IBM Cloud, offer flexible and scalable computing resources.
This paper explores the viability identifying types of engineering applications
running on a cloud infrastructure configured as an HPC platform using privacy
preserving features as input to statistical models. The engineering
applications considered in this work include MCNP6, a radiation transport code
developed by Los Alamos National Laboratory, OpenFOAM, an open source
computational fluid dynamics code, and CADO-NFS, a numerical implementation of
the general number field sieve algorithm used for prime number factorization.
Our experiments use the OpenStack cloud management tool to create a cloud HPC
environment and the privacy preserving Ceilometer billing meters as
classification features to demonstrate identification of these applications.
- Abstract(参考訳): クラウドコンピューティングは、あらゆる計算ニーズを満たす巨大な再構成可能なリソースへのユビキタスかつオンデマンドアクセスを提供する。
多くのサービスモデルが利用可能だが、IaaS(Infrastructure as a Service)モデルは、大量のクラウドコンピューティングノードをネットワークすることで、ハイパフォーマンスコンピューティング(HPC)プラットフォームとして運用するのに特に適している。
我々は太平洋北西国立研究所(pnnl)のクラウドコンピューティング環境を用いて実験を行った。
Amazon Web Services、Microsoft Azure、IBM Cloudなど、多くのクラウドコンピューティングプロバイダが、柔軟でスケーラブルなコンピューティングリソースを提供している。
本稿では,HPCプラットフォームとして構成されたクラウドインフラストラクチャ上で動作しているエンジニアリングアプリケーションの種類を,統計モデルへの入力としてプライバシ保護機能を用いて同定する。
本研究で検討されている工学的応用としては、ロスアラモス国立研究所が開発した放射線輸送コードmcnp6、オープンソースの計算流体力学コードopenfoam、素数分解に使用される一般数フィールドシーブアルゴリズムの数値実装cado-nfsなどがある。
当社の実験では、openstackクラウド管理ツールを使用してクラウドhpc環境を構築し、プライバシ保護ceilometer課金メーターを分類機能として、これらのアプリケーションの識別を実証しています。
関連論文リスト
- Feature Selection using the concept of Peafowl Mating in IDS [2.184775414778289]
クラウドコンピューティングはインフラストラクチャベース、プラットフォームベース、ソフトウェアベースのサービスを提供します。
この技術の人気は、パフォーマンス、高いレベルのコンピューティング能力、低コストのサービス、スケーラビリティ、可用性、柔軟性にある。
クラウド環境におけるデータの入手性とオープン性は、サイバー攻撃の世界に対して脆弱である。
侵入検知システムを用いて攻撃を検知し、情報セキュリティを確保する。
論文 参考訳(メタデータ) (2024-02-03T06:04:49Z) - SoTaNa: The Open-Source Software Development Assistant [81.86136560157266]
SoTaNaはオープンソースのソフトウェア開発アシスタントだ。
ソフトウェア工学の分野のための高品質な命令ベースのデータを生成する。
オープンソースの基盤モデルであるLLaMAを強化するためにパラメータ効率のよい微調整アプローチを採用している。
論文 参考訳(メタデータ) (2023-08-25T14:56:21Z) - Measuring the Carbon Intensity of AI in Cloud Instances [91.28501520271972]
我々は,ソフトウェアの炭素強度を測定するための枠組みを提供し,運転中の炭素排出量を測定することを提案する。
私たちは、Microsoft Azureクラウドコンピューティングプラットフォームにおける排出削減のための一連のアプローチを評価します。
論文 参考訳(メタデータ) (2022-06-10T17:04:04Z) - SOLIS -- The MLOps journey from data acquisition to actionable insights [62.997667081978825]
本稿では,基本的なクロスプラットフォームテンソルフレームワークとスクリプト言語エンジンを使用しながら,すべての要件をサポートする統合デプロイメントパイプラインとフリー・ツー・オペレートアプローチを提案する。
しかし、このアプローチは、実際のプロダクショングレードシステムに機械学習機能を実際にデプロイするために必要な手順やパイプラインを提供していない。
論文 参考訳(メタデータ) (2021-12-22T14:45:37Z) - Case study of SARS-CoV-2 transmission risk assessment in indoor
environments using cloud computing resources [1.3150679728390269]
複雑な計算フレームワークをクラウドサービスに抽象化してデプロイする方法を紹介します。
我々は、Dendro-kTメッシュ生成ツールとPETScソルバを利用して、シミュレーションフレームワークをAzureクラウドフレームワーク上にデプロイする。
クラウドマシンの性能を最先端のHPCマシンであるTACC Fronteraと比較する。
論文 参考訳(メタデータ) (2021-11-17T19:28:18Z) - Molecular Dynamics Simulations on Cloud Computing and Machine Learning
Platforms [0.8093262393618671]
我々は、科学計算アプリケーションの計算構造、設計、要求のパラダイムシフトを見る。
データ駆動型と機械学習のアプローチは、科学計算アプリケーションをサポートし、スピードアップし、拡張するために使用されています。
クラウドコンピューティングプラットフォームは、科学コンピューティングにますますアピールしている。
論文 参考訳(メタデータ) (2021-11-11T21:20:26Z) - Edge-Cloud Polarization and Collaboration: A Comprehensive Survey [61.05059817550049]
クラウドとエッジ両方のAIの体系的なレビューを行います。
私たちはクラウドとエッジモデリングの協調学習メカニズムを最初にセットアップしました。
我々は現在進行中の最先端AIトピックの可能性と実践経験について議論する。
論文 参考訳(メタデータ) (2021-11-11T05:58:23Z) - Auto-Split: A General Framework of Collaborative Edge-Cloud AI [49.750972428032355]
本稿では,Huawei Cloudのエッジクラウド共同プロトタイプであるAuto-Splitの技法と技術実践について述べる。
私たちの知る限りでは、Deep Neural Network(DNN)分割機能を提供する既存の産業製品はありません。
論文 参考訳(メタデータ) (2021-08-30T08:03:29Z) - The MIT Supercloud Dataset [3.375826083518709]
我々は、大規模なHPCとデータセンター/クラウドオペレーションの分析において、革新的なAI/MLアプローチを促進することを目的とした、MIT Supercloudデータセットを紹介します。
我々は、ジョブ毎のCPUおよびGPU使用率、メモリ使用率、ファイルシステムログ、物理モニタリングデータを含む、MIT Supercloudシステムから詳細な監視ログを提供する。
本稿では,データセットの詳細,収集手法,データ可用性について論じ,このデータを用いて開発されている潜在的な課題について論じる。
論文 参考訳(メタデータ) (2021-08-04T13:06:17Z) - A Privacy-Preserving Distributed Architecture for
Deep-Learning-as-a-Service [68.84245063902908]
本稿では,ディープラーニング・アズ・ア・サービスのための分散アーキテクチャを提案する。
クラウドベースのマシンとディープラーニングサービスを提供しながら、ユーザの機密データを保存できる。
論文 参考訳(メタデータ) (2020-03-30T15:12:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。