論文の概要: Innovations in trigger and data acquisition systems for next-generation
physics facilities
- arxiv url: http://arxiv.org/abs/2203.07620v1
- Date: Tue, 15 Mar 2022 03:13:32 GMT
- ステータス: 処理完了
- システム内更新日: 2022-03-17 08:25:45.894507
- Title: Innovations in trigger and data acquisition systems for next-generation
physics facilities
- Title(参考訳): 次世代物理設備におけるトリガー・データ取得システムの革新
- Authors: Rainer Bartoldus, Catrin Bernius, David W. Miller
- Abstract要約: データ集約型物理施設は、多種多様な大規模データ処理システムに依存している。
このホワイトペーパーは、これらの施設が引き金やデータ取得機器やシステムの設計において直面する課題を強調することを目的としている。
- 参考スコア(独自算出の注目度): 0.6445605125467573
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Data-intensive physics facilities are increasingly reliant on heterogeneous
and large-scale data processing and computational systems in order to collect,
distribute, process, filter, and analyze the ever increasing huge volumes of
data being collected. Moreover, these tasks are often performed in hard
real-time or quasi real-time processing pipelines that place extreme
constraints on various parameters and design choices for those systems.
Consequently, a large number and variety of challenges are faced to design,
construct, and operate such facilities. This is especially true at the energy
and intensity frontiers of particle physics where bandwidths of raw data can
exceed 100 Tb/s of heterogeneous, high-dimensional data sourced from >300M
individual sensors. Data filtering and compression algorithms deployed at these
facilities often operate at the level of 1 part in $10^5$, and once executed,
these algorithms drive the data curation process, further highlighting the
critical roles that these systems have in the physics impact of those
endeavors. This White Paper aims to highlight the challenges that these
facilities face in the design of the trigger and data acquisition
instrumentation and systems, as well as in their installation, commissioning,
integration and operation, and in building the domain knowledge and technical
expertise required to do so.
- Abstract(参考訳): データ集約型物理施設は、収集される膨大な量のデータを収集、配布、処理、フィルタリング、分析するために、ヘテロジニアスおよび大規模データ処理および計算システムに依存している。
さらに、これらのタスクは、様々なパラメータに極端な制約を課すハードリアルタイムまたは準リアルタイム処理パイプラインで実行されることが多い。
その結果、このような施設を設計、建設、運営する上で、多くの様々な課題に直面している。
これは素粒子物理学のエネルギーと強度のフロンティアにおいて特に当てはまり、生データの帯域幅は300m以上の個々のセンサーから供給される不均一な高次元データの100 tb/sを超える。
これらの施設に配備されたデータフィルタリングと圧縮アルゴリズムは、10^5$の1のレベルで運用されることが多く、一度実行されると、これらのアルゴリズムはデータキュレーションのプロセスを駆動し、これらのシステムの物理的影響における重要な役割をさらに強調する。
このホワイトペーパーは、これらの施設が直面している課題を、トリガーとデータ取得のインスツルメンテーションとシステムの設計、インストール、コミッショニング、統合、運用、そしてそれに必要なドメイン知識と技術的専門知識の構築で強調することを目的としています。
関連論文リスト
- Earth System Data Cubes: Avenues for advancing Earth system research [4.408949931570938]
地球系データキューブ(ESDC)は、このデータの洪水をシンプルで堅牢なフォーマットに変換するのに適したソリューションの1つとして登場した。
ESDCは、データをテンポラリグリッドを備えた分析可能なフォーマットに整理することで、これを実現している。
新たなクラウドベースの技術に照らして、データの潜在能力を最大限に実現するための障壁がある。
論文 参考訳(メタデータ) (2024-08-05T09:50:16Z) - Enabling High Data Throughput Reinforcement Learning on GPUs: A Domain Agnostic Framework for Data-Driven Scientific Research [90.91438597133211]
我々は、強化学習の適用において重要なシステムのボトルネックを克服するために設計されたフレームワークであるWarpSciを紹介する。
我々は、CPUとGPU間のデータ転送の必要性を排除し、数千のシミュレーションを同時実行可能にする。
論文 参考訳(メタデータ) (2024-08-01T21:38:09Z) - Data Augmentations in Deep Weight Spaces [89.45272760013928]
そこで本研究では,Mixup法に基づく新しい拡張手法を提案する。
既存のベンチマークと新しいベンチマークでこれらのテクニックのパフォーマンスを評価する。
論文 参考訳(メタデータ) (2023-11-15T10:43:13Z) - A spectrum of physics-informed Gaussian processes for regression in
engineering [0.0]
センサとデータ全般の可用性は向上していますが、純粋なデータ駆動アプローチから多くのサービス内エンジニアリングシステムや構造を完全に特徴づけることはできません。
本稿では、限られたデータで予測モデルを作成する能力を高めるために、機械学習技術と物理に基づく推論の組み合わせを追求する。
論文 参考訳(メタデータ) (2023-09-19T14:39:03Z) - Linking the Dynamic PicoProbe Analytical Electron-Optical Beam Line /
Microscope to Supercomputers [39.52789559084336]
Argonne National Laboratory(アルゴンヌ国立研究所)のDynamic PicoProbe(ダイナミック・ピコプローブ)は、1日に最大100GBのデータを生成できるアップグレードを行っている。
このデータは、基本的な科学と産業の両方のアプリケーションにとって非常に重要であるが、現在、これらの高ボリュームのデータストリームを扱うためのオンサイトインフラストラクチャは限られている。
本稿では,隣接するArgonne Leadership Computing Facilityにおいて,近隣のスーパーコンピュータへの大規模データ転送を支援するソフトウェアアーキテクチャを提供することにより,この問題に対処する。
このインフラストラクチャは、期待されるワークロードをサポートし、ドメインサイエンティストに過去の実験からデータを再インターロゲートして、さらなる科学的価値をもたらし、新たな洞察を導き出す機能を提供する。
論文 参考訳(メタデータ) (2023-08-25T23:07:58Z) - LargeST: A Benchmark Dataset for Large-Scale Traffic Forecasting [65.71129509623587]
道路交通予測はスマートシティのイニシアチブにおいて重要な役割を担い、ディープラーニングの力によって大きな進歩を遂げている。
しかし、現在の公開データセットで達成される有望な結果は、現実的なシナリオには適用できないかもしれない。
カリフォルニアで合計8,600のセンサーと5年間の時間カバレッジを含む、LargeSTベンチマークデータセットを紹介します。
論文 参考訳(メタデータ) (2023-06-14T05:48:36Z) - TRoVE: Transforming Road Scene Datasets into Photorealistic Virtual
Environments [84.6017003787244]
本研究では、シミュレーションデータセットに存在する困難とドメインギャップに対処する合成データ生成パイプラインを提案する。
既存のデータセットからアノテーションや視覚的手がかりを利用すれば、自動マルチモーダルデータ生成が容易になることを示す。
論文 参考訳(メタデータ) (2022-08-16T20:46:08Z) - Towards an Interpretable Data-driven Trigger System for High-throughput
Physics Facilities [7.939382824995354]
高スループットデータフィルタリングとトリガシステムを設計するための新しいデータ駆動アプローチを紹介します。
私たちの目標は、どのデータイベントを維持するかを決定するために、最小限のランタイムコストでデータ駆動フィルタリングシステムを設計することです。
現在のパラダイムにおける非局所的非効率性を考慮するために、解釈可能な予測モデリングとコストに敏感な学習から重要な洞察を紹介します。
論文 参考訳(メタデータ) (2021-04-14T05:01:32Z) - Deep Cellular Recurrent Network for Efficient Analysis of Time-Series
Data with Spatial Information [52.635997570873194]
本研究では,空間情報を用いた複雑な多次元時系列データを処理するための新しいディープセルリカレントニューラルネットワーク(DCRNN)アーキテクチャを提案する。
提案するアーキテクチャは,文献に比較して,学習可能なパラメータをかなり少なくしつつ,最先端の性能を実現している。
論文 参考訳(メタデータ) (2021-01-12T20:08:18Z) - Data Mining with Big Data in Intrusion Detection Systems: A Systematic
Literature Review [68.15472610671748]
クラウドコンピューティングは、複雑で高性能でスケーラブルな計算のために、強力で必要不可欠な技術になっている。
データ生成の迅速化とボリュームは、データ管理とセキュリティに重大な課題をもたらし始めている。
ビッグデータ設定における侵入検知システム(IDS)の設計と展開が重要視されている。
論文 参考訳(メタデータ) (2020-05-23T20:57:12Z) - Towards an Integrated Platform for Big Data Analysis [4.5257812998381315]
本稿では,これらすべての側面を統合した,ビッグデータ解析のための統合型プレート形式のビジョンについて述べる。
このアプローチの主な利点は、プラットフォーム全体の拡張スケーラビリティ、アルゴリズムのパラメータ化の改善、エンドツーエンドのデータ分析プロセスにおけるユーザビリティの改善である。
論文 参考訳(メタデータ) (2020-04-27T03:15:23Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。