論文の概要: On The Reliability Of Machine Learning Applications In Manufacturing
Environments
- arxiv url: http://arxiv.org/abs/2112.06986v1
- Date: Mon, 13 Dec 2021 19:41:26 GMT
- ステータス: 処理完了
- システム内更新日: 2021-12-15 17:06:07.158244
- Title: On The Reliability Of Machine Learning Applications In Manufacturing
Environments
- Title(参考訳): 製造環境における機械学習アプリケーションの信頼性について
- Authors: Nicolas Jourdan, Sagar Sen, Erik Johannes Husom, Enrique Garcia-Ceja,
Tobias Biegel and Joachim Metternich
- Abstract要約: 信頼性のあるシステムを構築するには、マシンラーニングのパフォーマンスの継続的オンライン監視が必要である。
概念とセンサーのドリフトは アルゴリズムの精度を低下させる
また, 機械学習アルゴリズムのロバスト性を評価し, 全試験アルゴリズムのドリフトの増加に伴い, 精度が著しく低下することを示した。
- 参考スコア(独自算出の注目度): 7.467244761351822
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The increasing deployment of advanced digital technologies such as Internet
of Things (IoT) devices and Cyber-Physical Systems (CPS) in industrial
environments is enabling the productive use of machine learning (ML) algorithms
in the manufacturing domain. As ML applications transcend from research to
productive use in real-world industrial environments, the question of
reliability arises. Since the majority of ML models are trained and evaluated
on static datasets, continuous online monitoring of their performance is
required to build reliable systems. Furthermore, concept and sensor drift can
lead to degrading accuracy of the algorithm over time, thus compromising
safety, acceptance and economics if undetected and not properly addressed. In
this work, we exemplarily highlight the severity of the issue on a publicly
available industrial dataset which was recorded over the course of 36 months
and explain possible sources of drift. We assess the robustness of ML
algorithms commonly used in manufacturing and show, that the accuracy strongly
declines with increasing drift for all tested algorithms. We further
investigate how uncertainty estimation may be leveraged for online performance
estimation as well as drift detection as a first step towards continually
learning applications. The results indicate, that ensemble algorithms like
random forests show the least decay of confidence calibration under drift.
- Abstract(参考訳): IoT(Internet of Things)デバイスやCPS(Cyber-Physical Systems)といった先進的なデジタル技術の産業環境への展開の増加は、製造業領域における機械学習(ML)アルゴリズムの生産的利用を可能にしている。
MLの応用が研究から実世界の産業環境における生産的利用へと移行するにつれ、信頼性の問題が生じる。
MLモデルの大部分が静的データセットでトレーニングされ、評価されているため、信頼性の高いシステムを構築するには、パフォーマンスの継続的なオンラインモニタリングが必要である。
さらに、概念とセンサドリフトは、時間とともにアルゴリズムの精度を低下させ、検出されていない場合の安全性、受容、経済学を損なう可能性がある。
本研究では,36ヶ月にわたって記録された公開産業データセットにおける問題の重大さを例示的に強調し,ドリフトの発生源について説明する。
また, 機械学習アルゴリズムのロバスト性を評価し, 全試験アルゴリズムのドリフトの増加に伴い, 精度が著しく低下することを示した。
さらに,オンラインパフォーマンス推定やドリフト検出に不確実性推定をどのように活用するかを,継続的に学習するアプリケーションへの第一歩として検討する。
その結果、ランダムフォレストのようなアンサンブルアルゴリズムは、ドリフト下での信頼度校正が最小となることが示された。
関連論文リスト
- Enabling Smart Retrofitting and Performance Anomaly Detection for a
Sensorized Vessel: A Maritime Industry Experience [0.21485350418225244]
本研究では,解釈可能な機械学習モデルを用いたディープラーニング駆動型異常検出システムを提案する。
我々は,LSTM(Long Short-Term Memory)オートエンコーダを用いた,ループ内非教師なしのプロセスを活用する。
TUCANAから取得した実データを用いて実験によりシステム評価を行い,その過程で得られたLSTMモデルを用いて80%以上の精度と90%のリコールを達成した。
論文 参考訳(メタデータ) (2023-12-30T01:31:54Z) - Using Machine Learning To Identify Software Weaknesses From Software
Requirement Specifications [49.1574468325115]
本研究は、要求仕様からソフトウェア弱点を特定するための効率的な機械学習アルゴリズムを見つけることに焦点を当てる。
ProMISE_exp. Naive Bayes、サポートベクターマシン(SVM)、決定木、ニューラルネットワーク、畳み込みニューラルネットワーク(CNN)アルゴリズムをテストした。
論文 参考訳(メタデータ) (2023-08-10T13:19:10Z) - Dynamic Model Agnostic Reliability Evaluation of Machine-Learning
Methods Integrated in Instrumentation & Control Systems [1.8978726202765634]
データ駆動型ニューラルネットワークベースの機械学習アルゴリズムの信頼性は十分に評価されていない。
National Institute for Standards and Technologyの最近のレポートでは、MLにおける信頼性は採用にとって重要な障壁となっている。
トレーニングデータセットにアウト・オブ・ディストリビューション検出を組み込むことにより、ML予測の相対的信頼性を評価するためのリアルタイムモデル非依存手法を実証する。
論文 参考訳(メタデータ) (2023-08-08T18:25:42Z) - Self-learning locally-optimal hypertuning using maximum entropy, and
comparison of machine learning approaches for estimating fatigue life in
composite materials [0.0]
疲労損傷を予測するための最大エントロピーの原理に基づくML近傍近似アルゴリズムを開発した。
予測は、他のMLアルゴリズムと同様、高いレベルの精度を達成する。
論文 参考訳(メタデータ) (2022-10-19T12:20:07Z) - Multi Agent System for Machine Learning Under Uncertainty in Cyber
Physical Manufacturing System [78.60415450507706]
近年の予測機械学習の進歩は、製造における様々なユースケースに応用されている。
ほとんどの研究は、それに関連する不確実性に対処することなく予測精度を最大化することに焦点を当てた。
本稿では,機械学習における不確実性の原因を特定し,不確実性下での機械学習システムの成功基準を確立する。
論文 参考訳(メタデータ) (2021-07-28T10:28:05Z) - Automated Machine Learning Techniques for Data Streams [91.3755431537592]
本稿では、最先端のオープンソースAutoMLツールを調査し、ストリームから収集したデータに適用し、時間とともにパフォーマンスがどのように変化するかを測定する。
この結果から,既製のAutoMLツールで十分な結果が得られることが示されたが,概念ドリフトや検出,適応といった手法が適用されれば,予測精度を時間とともに維持することが可能になる。
論文 参考訳(メタデータ) (2021-06-14T11:42:46Z) - Uncertainty-aware Remaining Useful Life predictor [57.74855412811814]
有効寿命 (Remaining Useful Life, RUL) とは、特定の産業資産の運用期間を推定する問題である。
本研究では,Deep Gaussian Processes (DGPs) を,前述の制限に対する解決策と捉える。
アルゴリズムの性能はNASAの航空機エンジン用N-CMAPSSデータセットで評価される。
論文 参考訳(メタデータ) (2021-04-08T08:50:44Z) - Anomaly Detection Based on Selection and Weighting in Latent Space [73.01328671569759]
SWADと呼ばれる新しい選択および重み付けに基づく異常検出フレームワークを提案する。
ベンチマークと実世界のデータセットによる実験は、SWADの有効性と優位性を示している。
論文 参考訳(メタデータ) (2021-03-08T10:56:38Z) - Out-of-Distribution Detection for Automotive Perception [58.34808836642603]
ニューラルネットワーク(NN)は、自律運転におけるオブジェクト分類に広く使われている。
NNは、アウト・オブ・ディストリビューション(OOD)データとして知られるトレーニングデータセットで適切に表現されていない入力データでフェールすることができる。
本稿では,OODデータを必要としない入力がOODであるか否かを判定し,推論の計算コストを増大させる方法を提案する。
論文 参考訳(メタデータ) (2020-11-03T01:46:35Z) - Development of Use-specific High Performance Cyber-Nanomaterial Optical
Detectors by Effective Choice of Machine Learning Algorithms [14.569246848322983]
サイバーナノマテリアル検出器におけるMLアルゴリズムの最適選択は、主に特定の用途を考慮して決定される。
検出性能の長期ドリフトを1年間にわたって追跡・モデル化することにより,再校正を必要とせずに予測精度を向上させることができることを示す。
論文 参考訳(メタデータ) (2019-12-26T02:44:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。