論文の概要: Repeatability, Reproducibility, Replicability, Reusability (4R) in
Journals' Policies and Software/Data Management in Scientific Publications: A
Survey, Discussion, and Perspectives
- arxiv url: http://arxiv.org/abs/2312.11028v1
- Date: Mon, 18 Dec 2023 09:02:28 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-20 20:40:47.914899
- Title: Repeatability, Reproducibility, Replicability, Reusability (4R) in
Journals' Policies and Software/Data Management in Scientific Publications: A
Survey, Discussion, and Perspectives
- Title（参考訳）: 学術出版物におけるジャーナルの方針とソフトウェア/データ管理における再現性,再現性,再現性,再利用性(4r) : 調査,議論,展望
- Authors: Jos\'e Armando Hern\'andez (CB), Miguel Colom (CB, CMLA)
- Abstract要約: 我々は、引用指向のプラクティス、ジャーナルポリシー、レコメンデーション、アーティファクト記述/評価ガイドライン、提出ガイド、技術的進化の間に大きなギャップを見出した。
著者と学術雑誌の関係を,共同で科学的結果を改善するための相互取り組みとして分析した。
我々は,学術論文を著者に提出するための統一的で標準化された再現性ガイドとともに,雑誌政策の勧告を提案する。
- 参考スコア（独自算出の注目度）: 1.446375009535228
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: With the recognized crisis of credibility in scientific research, there is a
growth of reproducibility studies in computer science, and although existing
surveys have reviewed reproducibility from various perspectives, especially
very specific technological issues, they do not address the author-publisher
relationship in the publication of reproducible computational scientific
articles. This aspect requires significant attention because it is the basis
for reliable research. We have found a large gap between the
reproducibility-oriented practices, journal policies, recommendations,
publisher artifact Description/Evaluation guidelines, submission guides,
technological reproducibility evolution, and its effective adoption to
contribute to tackling the crisis. We conducted a narrative survey, a
comprehensive overview and discussion identifying the mutual efforts required
from Authors, Journals, and Technological actors to achieve reproducibility
research. The relationship between authors and scientific journals in their
mutual efforts to jointly improve the reproducibility of scientific results is
analyzed. Eventually, we propose recommendations for the journal policies, as
well as a unified and standardized Reproducibility Guide for the submission of
scientific articles for authors. The main objective of this work is to analyze
the implementation and experiences of reproducibility policies, techniques and
technologies, standards, methodologies, software, and data management tools
required for scientific reproducible publications. Also, the benefits and
drawbacks of such an adoption, as well as open challenges and promising trends,
to propose possible strategies and efforts to mitigate the identified gaps. To
this purpose, we analyzed 200 scientific articles, surveyed 16 Computer Science
journals, and systematically classified them according to reproducibility
strategies, technologies, policies, code citation, and editorial business. We
conclude there is still a reproducibility gap in scientific publications,
although at the same time also the opportunity to reduce this gap with the
joint effort of authors, publishers, and technological providers.
- Abstract（参考訳）: 科学研究における信頼性の危機が認識され、コンピュータ科学における再現可能性の研究が成長し、既存の調査では様々な観点から再現性についてレビューされているが、再現性のある科学論文の出版における著者と出版者の関係には対処していない。
この側面は、信頼できる研究の基盤であるため、大きな注意を要する。
再現性重視のプラクティス,ジャーナルポリシ,レコメンデーション,出版者アーティファクトの説明・評価ガイドライン,提出ガイド,技術的再現性進化,危機対策への効果的な導入との間には,大きなギャップがある。
再現性研究を実現するために,著者,雑誌,技術関係者が必要とする相互努力を総合的に概観し,議論を行った。
論文の再現性を向上させるための相互努力における著者と学術雑誌の関係を分析した。
最終的に、著者への科学論文提出のための統一的で標準化された再現性ガイドとともに、雑誌政策の勧告を提案する。
この研究の主な目的は、再現性ポリシー、技術と技術、標準、方法論、ソフトウェア、および科学的再現性出版に必要なデータ管理ツールの実装と経験を分析することである。
また、そのような採用の利点と欠点、そしてオープンな課題や将来性のあるトレンドは、特定されたギャップを軽減するための戦略と努力を提案する。
そこで本研究では,200の科学論文を分析し,16の学術雑誌を調査し,再現性戦略,技術,政策,コード引用,編集業務に応じて体系的に分類した。
学術出版物にはまだ再現性ギャップがあるが、同時に著者、出版者、技術提供者の協力によってこのギャップを減らす機会もあると結論づけた。
関連論文リスト
- Transforming Science with Large Language Models: A Survey on AI-assisted Scientific Discovery, Experimentation, Content Generation, and Evaluation [58.064940977804596]
多くの新しいAIモデルとツールが提案され、世界中の研究者や学者が研究をより効果的かつ効率的に実施できるようにすることを約束している。
これらのツールの欠点と誤用の可能性に関する倫理的懸念は、議論の中で特に顕著な位置を占める。
論文 参考訳（メタデータ） (2025-02-07T18:26:45Z) - Continuous Analysis: Evolution of Software Engineering and Reproducibility for Science [0.0]
本稿では,科学研究における課題を解決するために,連続分析の概念を紹介する。
CAを採用することで、科学コミュニティは研究成果の妥当性と一般化性を確保することができる。
論文 参考訳（メタデータ） (2024-11-04T17:11:08Z) - ResearchAgent: Iterative Research Idea Generation over Scientific Literature with Large Language Models [56.08917291606421]
ResearchAgentは、新しい作品のアイデアと運用のためのAIベースのシステムである。
ResearchAgentは、新しい問題を自動で定義し、手法と設計実験を提案し、繰り返し修正する。
我々は、複数の分野にわたる科学論文に関するResearchAgentを実験的に検証した。
論文 参考訳（メタデータ） (2024-04-11T13:36:29Z) - A Literature Review of Literature Reviews in Pattern Analysis and Machine Intelligence [55.33653554387953]
パターン分析とマシンインテリジェンス(PAMI)は、情報の収集と断片化を目的とした多くの文献レビューにつながっている。
本稿では、PAMI分野におけるこれらの文献レビューの徹底的な分析について述べる。
1)PAMI文献レビューの構造的・統計的特徴は何か,(2)レビューの増大するコーパスを効率的にナビゲートするために研究者が活用できる戦略は何か,(3)AIが作成したレビューの利点と限界は人間によるレビューと比較するとどのようなものか,という3つの主要な研究課題に対処しようとする。
論文 参考訳（メタデータ） (2024-02-20T11:28:50Z) - Scientific Opinion Summarization: Paper Meta-review Generation Dataset, Methods, and Evaluation [55.00687185394986]
本稿では,論文レビューをメタレビューに合成する,科学的意見要約の課題を提案する。
ORSUMデータセットは、47のカンファレンスから15,062のメタレビューと57,536の論文レビューをカバーしている。
実験の結果,(1)人間による要約は,議論の深みや特定の領域に対するコンセンサスや論争の特定など,必要な基準をすべて満たしていないこと,(2)タスクの分解と反復的自己調整の組み合わせは,意見の強化に強い可能性を示唆している。
論文 参考訳（メタデータ） (2023-05-24T02:33:35Z) - How Data Scientists Review the Scholarly Literature [4.406926847270567]
データサイエンティストの文献レビューの実践について検討する。
データサイエンスは、論文の指数的な増加を示す分野である。
これらの科学者が直面する具体的な実践や課題について、事前の研究は行われていない。
論文 参考訳（メタデータ） (2023-01-10T03:53:05Z) - Artificial intelligence technologies to support research assessment: A
review [10.203602318836444]
この文献レビューは、記事のテキストから、より高いインパクトやより高い品質の研究に関連する指標を特定する。
論文やカンファレンス論文の引用数や品質スコアを予測するために機械学習技術を使用した研究が含まれている。
論文 参考訳（メタデータ） (2022-12-11T06:58:39Z) - Revise and Resubmit: An Intertextual Model of Text-based Collaboration
in Peer Review [52.359007622096684]
ピアレビューは、ほとんどの科学分野における出版プロセスの重要な要素である。
既存のNLP研究は個々のテキストの分析に重点を置いている。
編集補助は、しばしばテキストのペア間の相互作用をモデル化する必要がある。
論文 参考訳（メタデータ） (2022-04-22T16:39:38Z) - CitationIE: Leveraging the Citation Graph for Scientific Information
Extraction [89.33938657493765]
引用論文と引用論文の参照リンクの引用グラフを使用する。
最先端技術に対するエンド・ツー・エンドの情報抽出の大幅な改善を観察する。
論文 参考訳（メタデータ） (2021-06-03T03:00:12Z) - Generating Knowledge Graphs by Employing Natural Language Processing and
Machine Learning Techniques within the Scholarly Domain [1.9004296236396943]
本稿では、自然言語処理と機械学習を利用して研究論文から実体や関係を抽出する新しいアーキテクチャを提案する。
本研究では,現在最先端の自然言語処理ツールとテキストマイニングツールを用いて,知識抽出の課題に取り組む。
セマンティックWebドメイン内の論文26,827件から抽出した109,105件のトリプルを含む科学知識グラフを作成した。
論文 参考訳（メタデータ） (2020-10-28T08:31:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。