論文の概要: Assessing test artifact quality -- A tertiary study
- arxiv url: http://arxiv.org/abs/2402.09541v1
- Date: Wed, 14 Feb 2024 19:31:57 GMT
- ステータス: 処理完了
- システム内更新日: 2024-02-16 18:05:53.641986
- Title: Assessing test artifact quality -- A tertiary study
- Title(参考訳): テストアーティファクトの品質評価 : 第3次研究
- Authors: Huynh Khanh Vi Tran, Michael Unterkalmsteiner, J\"urgen B\"orstler,
Nauman bin Ali
- Abstract要約: 我々は、ソフトウェアテストアーティファクトの品質面に関する既存の二次研究を特定し、分析するために、系統的な文献レビューを実施してきた。
テストケース/スーツの品質を調査する環境を特徴付けるのに使用できる文脈次元と要因の集約について述べる。
- 参考スコア(独自算出の注目度): 1.7827643249624088
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Context: Modern software development increasingly relies on software testing
for an ever more frequent delivery of high quality software. This puts high
demands on the quality of the central artifacts in software testing, test
suites and test cases. Objective: We aim to develop a comprehensive model for
capturing the dimensions of test case/suite quality, which are relevant for a
variety of perspectives. Method: We have carried out a systematic literature
review to identify and analyze existing secondary studies on quality aspects of
software testing artifacts. Results: We identified 49 relevant secondary
studies. Of these 49 studies, less than half did some form of quality appraisal
of the included primary studies and only 3 took into account the quality of the
primary study when synthesizing the results. We present an aggregation of the
context dimensions and factors that can be used to characterize the environment
in which the test case/suite quality is investigated. We also provide a
comprehensive model of test case/suite quality with definitions for the quality
attributes and measurements based on findings in the literature and ISO/IEC
25010:2011. Conclusion: The test artifact quality model presented in the paper
can be used to support test artifact quality assessment and improvement
initiatives in practice. Furtherm Information and Software Technology 139
(2021): 106620ore, the model can also be used as a framework for documenting
context characteristics to make research results more accessible for research
and practice.
- Abstract(参考訳): コンテキスト: 現代のソフトウェア開発は、高品質なソフトウェアをより頻繁に提供するために、ますますソフトウェアテストに依存しています。
これにより、ソフトウェアテスト、テストスイート、テストケースの中心的なアーティファクトの品質に対する高い要求が生まれます。
目的: さまざまな視点に関係のあるテストケース/適合品質の次元を捉える包括的なモデルを開発することを目的としている。
方法: ソフトウェアテストアーティファクトの品質に関する既存の二次研究を識別・分析するために,体系的な文献レビューを実施した。
結果: 二次研究は49件であった。
これらの49件の研究のうち,本研究の質評価は半数に満たず,結果合成時の一次研究の質を考慮に入れたものは3つに過ぎなかった。
本稿では,テストケース/適合品質が調査される環境を特徴付けるために使用できるコンテキスト次元と要因の集約について述べる。
また,文献およびISO/IEC 25010:2011の知見に基づいて,品質特性と測定値を定義した総合的なテストケース/スーツ品質モデルも提供する。
結論: 本論文で提示されたテストアーティファクトの品質モデルを用いて,テストアーティファクトの品質評価と改善イニシアチブの実践を支援する。
furtherm information and software technology 139 (2021): 106620ore このモデルは、研究結果を研究や実践にもっとアクセスしやすくするために、コンテキスト特性を文書化するためのフレームワークとしても使用できる。
関連論文リスト
- QuRating: Selecting High-Quality Data for Training Language Models [69.55617417985809]
本稿では,人間が直感的に知覚するテキストの抽象的品質をキャプチャする事前学習データを選択するQuRatingを紹介する。
本稿では,書体,専門知識,事実とトリビア,教育的価値の4つの特性について検討する。
ペアの判断からスカラー評価を学ぶためにQuRaterモデルをトレーニングし、それを4つの基準ごとに品質評価付き260Bのトレーニングコーパスにアノテートするために使用します。
論文 参考訳(メタデータ) (2024-02-15T06:36:07Z) - A manual categorization of new quality issues on automatically-generated
tests [0.8225289576465757]
2,340個の自動生成テストからなる外部データセットの手動解析について報告する。
4つのカテゴリに分類された13の新たな品質課題の分類法を提案する。
自動生成テストの品質と有用性を改善するために,テストジェネレータが考慮すべき8つの勧告を提案する。
論文 参考訳(メタデータ) (2023-12-14T11:19:14Z) - A Novel Metric for Measuring Data Quality in Classification Applications
(extended version) [0.0]
データ品質を測定するための新しい指標を紹介し説明する。
この尺度は、分類性能とデータの劣化の相関した進化に基づいている。
各基準の解釈と評価レベルの例を提供する。
論文 参考訳(メタデータ) (2023-12-13T11:20:09Z) - Test-Case Quality -- Understanding Practitioners' Perspectives [1.7827643249624088]
本稿では,11種類のテストケースの品質特性からなる品質モデルを提案する。
我々は,実践者と学業者の間で,テストケースの品質を定義する上でのミスアライメントを特定した。
論文 参考訳(メタデータ) (2023-09-28T19:10:01Z) - Analyzing Dataset Annotation Quality Management in the Wild [63.07224587146207]
最先端モデルのトレーニングと評価に使用される一般的なデータセットでさえ、誤ったアノテーションやバイアス、アーティファクトの量は無視できない。
データセット作成プロジェクトに関するプラクティスやガイドラインは存在するが、品質管理の実施方法に関する大規模な分析はまだ行われていない。
論文 参考訳(メタデータ) (2023-07-16T21:22:40Z) - Image Quality Assessment in the Modern Age [53.19271326110551]
本チュートリアルは、画像品質評価(IQA)の基礎的理論、方法論、現状の進歩を聴衆に提供する。
まず,視覚刺激を適切に選択する方法に着目し,主観的品質評価手法を再考する。
手書きのエンジニアリングと(深い)学習ベースの手法の両方をカバーします。
論文 参考訳(メタデータ) (2021-10-19T02:38:46Z) - Statistical Learning to Operationalize a Domain Agnostic Data Quality
Scoring [8.864453148536061]
この研究は、DQスコア、レポート、ラベルを提供するために、受信したデータセットとメタデータを収集する自動化プラットフォームを提供する。
この研究の結果は、データサイエンティストにとって有用であり、この品質ラベルの価値は、それぞれの実践的応用のためにデータをデプロイする前に信頼を喚起する。
論文 参考訳(メタデータ) (2021-08-16T12:20:57Z) - Implementation of Departmental and Periodical Examination Analyzer
System [0.0]
The Departmental and Periodical Examination System was developed using Visual Basic language。
このシステムは、学生、教師、学校の管理者、情報技術専門家のグループによって評価された。
論文 参考訳(メタデータ) (2021-03-09T06:47:20Z) - Quality meets Diversity: A Model-Agnostic Framework for Computerized
Adaptive Testing [60.38182654847399]
コンピュータ適応テスト(CAT)は多くのシナリオで有望なテストアプリケーションとして現れています。
CAT ソリューションのための新しいフレームワークである Model-Agnostic Adaptive Testing (MAAT) を提案する。
論文 参考訳(メタデータ) (2021-01-15T06:48:50Z) - Generative Models are Unsupervised Predictors of Page Quality: A
Colossal-Scale Study [86.62171568318716]
GPT-2のような大規模な生成言語モデルは、テキストを生成する能力で有名である。
ページ品質」の教師なし予測器が出現し、トレーニングなしで品質の低いコンテンツを検出することができることを示す。
われわれは5億件以上のウェブ記事の質的、定量的な分析を行い、このトピックについて史上最大規模の研究を行った。
論文 参考訳(メタデータ) (2020-08-17T07:13:24Z) - Object-QA: Towards High Reliable Object Quality Assessment [71.71188284059203]
オブジェクト認識アプリケーションでは、オブジェクトイメージは通常、異なる品質レベルで表示される。
本稿では,オブジェクト画像の信頼性の高い品質スコアを評価するために,Object-QAという効果的手法を提案する。
論文 参考訳(メタデータ) (2020-05-27T01:46:58Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。