論文の概要: Replication Packages in Software Engineering Secondary Studies: A Systematic Mapping

• arxiv url: http://arxiv.org/abs/2504.12646v1
• Date: Thu, 17 Apr 2025 05:11:39 GMT
• ステータス: 翻訳完了
• システム内更新日: 2025-04-18 14:38:22.257672
• Title: Replication Packages in Software Engineering Secondary Studies: A Systematic Mapping
• Title（参考訳）: ソフトウェア工学二次研究におけるレプリケーションパッケージ:システムマッピング
• Authors: Aleksi Huotala, Miikka Kuutila, Mika Mäntylä,
• Abstract要約: システムレビュー(SR)は、ソフトウェア工学(SE)を含む科学における最先端の証拠をまとめたものである。 2013年から2023年の間に発行された528件の二次研究では、複製パッケージの可用性と報告を分析した。
• 参考スコア（独自算出の注目度）: 0.9421843976231371
• License:
• Abstract: Context: Systematic reviews (SRs) summarize state-of-the-art evidence in science, including software engineering (SE). Objective: Our objective is to evaluate how SRs report replication packages and to provide a comprehensive list of these packages. Method: We examined 528 secondary studies published between 2013 and 2023 to analyze the availability and reporting of replication packages. Results: Our findings indicate that only 25.4% of the reviewed studies include replication packages. Encouragingly, the situation is gradually improving, as our regression analysis shows significant increase in the availability of replication packages over time. However, in 2023, just 50.6% of secondary studies provided a replication package while an even lower percentage, 29.1% had used a permanent repository with a digital object identifier (DOI) for storage. Conclusion: To enhance transparency and reproducibility in SE research, we advocate for the mandatory publication of replication packages in secondary studies.
• Abstract（参考訳）: コンテキスト: システムレビュー(SR)は、ソフトウェア工学(SE)を含む、科学における最先端の証拠を要約する。 目的:我々の目標は、SRが複製パッケージをどのように報告するかを評価し、これらのパッケージの包括的なリストを提供することです。 方法:2013年から2023年の間に発行された528の二次研究を検証し,複製パッケージの可用性と報告について分析した。 結果: 調査対象の再現パッケージは25.4%に過ぎなかった。 当社のレグレッション分析では,時間とともに複製パッケージの可用性が著しく向上しているため,状況は徐々に改善している。 しかしながら、2023年には、複製パッケージを提供する二次研究の50.6%に過ぎず、さらに低い割合で29.1%がデジタルオブジェクト識別子(DOI)を格納するための永続的なリポジトリを使用していた。 結論:SE研究における透明性と再現性を高めるため,二次研究における複製パッケージの必須公開を提唱する。

関連論文リスト

• Generative Retrieval for Book search [106.67655212825025]
  書籍検索のための効率的な生成検索フレームワークを提案する。 データ拡張とアウトライン指向の書籍エンコーディングの2つの主要コンポーネントがある。 プロプライエタリなBaiduデータセットの実験では、GBSが強力なベースラインを上回ることが示されている。
  論文  参考訳（メタデータ） (2025-01-19T12:57:13Z)
• Revisiting BPR: A Replicability Study of a Common Recommender System Baseline [78.00363373925758]
  我々は,BPRモデルの特徴を考察し,その性能への影響を示し,オープンソースのBPR実装について検討する。 分析の結果,これらの実装とオリジナルのBPR論文の矛盾が明らかとなり,特定の実装に対して最大50%の性能低下がみられた。 BPRモデルは、トップnのレコメンデーションタスクにおける最先端メソッドに近いパフォーマンスレベルを達成でき、特定のデータセット上でもパフォーマンスが向上することを示す。
  論文  参考訳（メタデータ） (2024-09-21T18:39:53Z)
• RaFe: Ranking Feedback Improves Query Rewriting for RAG [83.24385658573198]
  アノテーションを使わずにクエリ書き換えモデルをトレーニングするためのフレームワークを提案する。 公開されているリランカを活用することで、フィードバックはリライトの目的とよく一致します。
  論文  参考訳（メタデータ） (2024-05-23T11:00:19Z)
• A Second Look on BASS -- Boosting Abstractive Summarization with Unified Semantic Graphs -- A Replication Study [2.592470112714595]
  本稿では,統一意味グラフの概念に基づく抽象的な要約システムであるBASSフレームワークの詳細な複製について述べる。 本研究は、キーコンポーネントの複製における課題と、新しいコンポーネントの複製に根ざしたエラーソースを系統的に分離するアブレーション研究を含む。
  論文  参考訳（メタデータ） (2024-03-05T12:48:29Z)
• Emerging Results on Automated Support for Searching and Selecting Evidence for Systematic Literature Review Updates [1.1153433121962064]
  本稿では,ソフトウェア工学におけるSLR更新研究の検索と選択を支援する自動手法について述べる。 我々は,機械学習(ML)アルゴリズムを用いて,雪玉探索技術を実行する自動化ツールのプロトタイプを開発し,SLR更新に関する関連する研究を選択することを支援する。
  論文  参考訳（メタデータ） (2024-02-07T23:39:20Z)
• Automatically Finding and Categorizing Replication Studies [0.0]
  多くの実験科学分野において、複製に失敗した論文は、複製研究の発見可能性の低さから引用され続けている。 論文の複製研究を自動的に行うシステムを構築する第一歩として、334の複製研究と344の複製研究が集められた。
  論文  参考訳（メタデータ） (2023-11-25T15:27:10Z)
• What do You Mean by Relation Extraction? A Survey on Datasets and Study on Scientific Relation Classification [21.513743126525622]
  本研究では,2つのデータセットの科学的関係分類に関する実証的研究を行った。 大量のデータの重複にもかかわらず,本分析はアノテーションにかなりの相違点を明らかにした。 さらにサブドメイン内での変化は存在するが、関係分類は限定的な程度にしか影響しない。
  論文  参考訳（メタデータ） (2022-04-28T14:07:25Z)
• Does Recommend-Revise Produce Reliable Annotations? An Analysis on Missing Instances in DocRED [60.39125850987604]
  テキスト修正方式は, 偽陰性サンプルと, 人気エンティティや関係性に対する明らかな偏見をもたらすことを示す。 より信頼性の高いドキュメントREモデルのテストセットとして機能するように、relabeledデータセットがリリースされている。
  論文  参考訳（メタデータ） (2022-04-17T11:29:01Z)
• The MultiBERTs: BERT Reproductions for Robustness Analysis [86.29162676103385]
  事前トレーニングの再実行は、パフォーマンスに関して、かなり異なる結論をもたらす可能性がある。 我々は25個のBERTベースのチェックポイントの集合であるMultiBERTを紹介する。 目標は、研究者が事前訓練の手順について、堅牢で統計的に正当化された結論を描けるようにすることである。
  論文  参考訳（メタデータ） (2021-06-30T15:56:44Z)
• An Empirical Analysis of the R Package Ecosystem [0.0]
  私たちは20年間で25,000以上のパッケージ、15万のリリース、1500万ファイルを分析しました。 生態系の歴史的成長は、あらゆる手段の下で堅牢であることに気付きました。
  論文  参考訳（メタデータ） (2021-02-19T12:55:18Z)
• Identifying Statistical Bias in Dataset Replication [102.92137353938388]
  モデルが(11-14%) の精度低下を示すImageNetデータセットの再現について検討した。 同定された統計バイアスを補正した後、推定3.6%のpm 1.5%の当初の11.7%のpm 1.0%の精度低下しか記録されていない。
  論文  参考訳（メタデータ） (2020-05-19T17:48:32Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。