論文の概要: D-Score: A White-Box Diagnosis Score for CNNs Based on Mutation
Operators
- arxiv url: http://arxiv.org/abs/2304.00697v1
- Date: Mon, 3 Apr 2023 03:13:59 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-04 16:44:14.611586
- Title: D-Score: A White-Box Diagnosis Score for CNNs Based on Mutation
Operators
- Title(参考訳): d-score:突然変異演算子に基づくcnnのホワイトボックス診断スコア
- Authors: Xin Zhang and Yuqi Song and Xiaofeng Wang and Fei Zuo
- Abstract要約: 畳み込みニューラルネットワーク(CNN)は、自律運転や診断など、多くの安全クリティカルな領域に広く応用されている。
そこで本研究では,変異演算子と画像変換を用いたホワイトボックス診断手法を提案する。
また,D-Scoreに基づくデータ拡張手法を提案し,CNNの性能を翻訳や再スケーリングに拡張する。
- 参考スコア(独自算出の注目度): 8.977819892091
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Convolutional neural networks (CNNs) have been widely applied in many
safety-critical domains, such as autonomous driving and medical diagnosis.
However, concerns have been raised with respect to the trustworthiness of these
models: The standard testing method evaluates the performance of a model on a
test set, while low-quality and insufficient test sets can lead to unreliable
evaluation results, which can have unforeseeable consequences. Therefore, how
to comprehensively evaluate CNNs and, based on the evaluation results, how to
enhance their trustworthiness are the key problems to be urgently addressed.
Prior work has used mutation tests to evaluate the test sets of CNNs. However,
the evaluation scores are black boxes and not explicit enough for what is being
tested. In this paper, we propose a white-box diagnostic approach that uses
mutation operators and image transformation to calculate the feature and
attention distribution of the model and further present a diagnosis score,
namely D-Score, to reflect the model's robustness and fitness to a dataset. We
also propose a D-Score based data augmentation method to enhance the CNN's
performance to translations and rescalings. Comprehensive experiments on two
widely used datasets and three commonly adopted CNNs demonstrate the
effectiveness of our approach.
- Abstract(参考訳): 畳み込みニューラルネットワーク(cnns)は、自動運転や医療診断など、多くの安全クリティカルな領域に広く適用されている。
標準テスト方法はテストセットにおけるモデルのパフォーマンスを評価するが、低品質で不十分なテストセットは信頼性の低い評価結果につながり、予期せぬ結果をもたらす可能性がある。
したがって、cnnを総合的に評価する方法と、評価結果に基づいて、信頼度を高める方法が緊急対応すべき重要な課題である。
以前の研究では、cnnのテストセットを評価するために突然変異試験を用いた。
しかし、評価スコアはブラックボックスであり、テスト対象として十分に明示されていない。
本稿では,突然変異演算子と画像変換を用いてモデルの特徴と注意分布を算出し,さらに,モデルのロバスト性とデータセットへの適合性を反映したd-scoreという診断スコアを提示するホワイトボックス診断手法を提案する。
また,D-Scoreに基づくデータ拡張手法を提案し,CNNの性能を翻訳や再スケーリングに拡張する。
広く使われている2つのデータセットと3つのCNNに関する総合的な実験は、我々のアプローチの有効性を実証している。
関連論文リスト
- TEASMA: A Practical Methodology for Test Adequacy Assessment of Deep Neural Networks [4.528286105252983]
TEASMAはDeep Neural Networksのテストセットの精度を正確に評価するために設計された包括的で実用的な方法論である。
遠隔ベースサプライズカバレッジ(DSC)、ライクフードベースサプライズカバレッジ(LSC)、入出力カバレッジ(IDC)、ミューテーションスコア(MS)の4つの測定値を用いてTEASMAを評価する。
論文 参考訳(メタデータ) (2023-08-02T17:56:05Z) - Towards Reliable Medical Image Segmentation by utilizing Evidential Calibrated Uncertainty [52.03490691733464]
本稿では,医療画像セグメンテーションネットワークにシームレスに統合可能な,実装が容易な基礎モデルであるDEviSを紹介する。
主観的論理理論を利用して、医用画像分割の問題に対する確率と不確実性を明示的にモデル化する。
DeviSには不確実性を考慮したフィルタリングモジュールが組み込まれている。
論文 参考訳(メタデータ) (2023-01-01T05:02:46Z) - Stain Normalized Breast Histopathology Image Recognition using
Convolutional Neural Networks for Cancer Detection [9.826027427965354]
近年の進歩により、畳み込みニューラルネットワーク(CNN)アーキテクチャは乳がん検出のためのコンピュータ支援診断(CAD)システムの設計に利用できることが示されている。
乳腺病理像の2値分類のためのCNNモデルについて検討した。
我々は,200倍,400倍に拡大した病理像に対して,トレーニング済みのCNNネットワークを利用可能なBreaKHisデータセットで検証した。
論文 参考訳(メタデータ) (2022-01-04T03:09:40Z) - Novelty-based Generalization Evaluation for Traffic Light Detection [13.487711023133764]
独立テストデータセット上で様々なメトリクスを計算することにより,畳み込みニューラルネットワーク(CNN)の一般化能力を評価する。
テストデータセットにおけるオブジェクトの新規性を考慮したCNN一般化スコアリングフレームワークを提案する。
論文 参考訳(メタデータ) (2022-01-03T09:23:56Z) - Black-Box Testing of Deep Neural Networks through Test Case Diversity [1.4700751484033807]
ブラックボックスの入力多様性指標を,ホワイトボックスのカバレッジ基準の代替として検討した。
実験により,テスト入力セットに埋め込まれた画像特徴の多様性に依存することが,カバレッジ基準よりも信頼性の高い指標であることが確認された。
論文 参考訳(メタデータ) (2021-12-20T20:12:53Z) - Model Doctor: A Simple Gradient Aggregation Strategy for Diagnosing and
Treating CNN Classifiers [33.82339346293966]
畳み込みニューラルネットワーク(CNN)は,分類タスクにおいて優れた性能を発揮する。
CNNは、予測メカニズムを理解するのが難しい「ブラックボックス」と見なされていることが広く知られている。
本稿では,モデルドクターと呼ばれる,最初の完全自動診断・治療ツールを提案する。
論文 参考訳(メタデータ) (2021-12-09T14:05:00Z) - BreakingBED -- Breaking Binary and Efficient Deep Neural Networks by
Adversarial Attacks [65.2021953284622]
CNNのホワイトボックス攻撃やブラックボックス攻撃に対する堅牢性について検討する。
結果は、蒸留されたCNN、エージェントベースの最新のprunedモデル、およびバイナライズニューラルネットワークのために示されています。
論文 参考訳(メタデータ) (2021-03-14T20:43:19Z) - Many-to-One Distribution Learning and K-Nearest Neighbor Smoothing for
Thoracic Disease Identification [83.6017225363714]
ディープラーニングは、病気の識別性能を改善するための最も強力なコンピュータ支援診断技術となった。
胸部X線撮影では、大規模データの注釈付けには専門的なドメイン知識が必要で、時間を要する。
本論文では、単一モデルにおける疾患同定性能を改善するために、複数対1の分布学習(MODL)とK-nearest neighbor smoothing(KNNS)手法を提案する。
論文 参考訳(メタデータ) (2021-02-26T02:29:30Z) - Improving Uncertainty Calibration via Prior Augmented Data [56.88185136509654]
ニューラルネットワークは、普遍関数近似器として機能することで、複雑なデータ分布から学習することに成功した。
彼らはしばしば予測に自信過剰であり、不正確で誤った確率的予測に繋がる。
本稿では,モデルが不当に過信である特徴空間の領域を探索し,それらの予測のエントロピーをラベルの以前の分布に対して条件的に高める手法を提案する。
論文 参考訳(メタデータ) (2021-02-22T07:02:37Z) - An Uncertainty-Driven GCN Refinement Strategy for Organ Segmentation [53.425900196763756]
本研究では,不確実性解析とグラフ畳み込みネットワークに基づくセグメンテーション改善手法を提案する。
半教師付きグラフ学習問題を定式化するために、特定の入力ボリュームにおける畳み込みネットワークの不確実性レベルを用いる。
本手法は膵臓で1%,脾臓で2%向上し,最先端のCRF改善法よりも優れていた。
論文 参考訳(メタデータ) (2020-12-06T18:55:07Z) - Diversity inducing Information Bottleneck in Model Ensembles [73.80615604822435]
本稿では,予測の多様性を奨励することで,ニューラルネットワークの効果的なアンサンブルを生成する問題をターゲットにする。
そこで本研究では,潜伏変数の学習における逆損失の多様性を明示的に最適化し,マルチモーダルデータのモデリングに必要な出力予測の多様性を得る。
最も競争力のあるベースラインと比較して、データ分布の変化の下で、分類精度が大幅に向上した。
論文 参考訳(メタデータ) (2020-03-10T03:10:41Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。