論文の概要: Repeatability, Reproducibility, Replicability, Reusability (4R) in
Journals' Policies and Software/Data Management in Scientific Publications: A
Survey, Discussion, and Perspectives
- arxiv url: http://arxiv.org/abs/2312.11028v1
- Date: Mon, 18 Dec 2023 09:02:28 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-20 20:40:47.914899
- Title: Repeatability, Reproducibility, Replicability, Reusability (4R) in
Journals' Policies and Software/Data Management in Scientific Publications: A
Survey, Discussion, and Perspectives
- Title（参考訳）: 学術出版物におけるジャーナルの方針とソフトウェア/データ管理における再現性,再現性,再現性,再利用性(4r) : 調査,議論,展望
- Authors: Jos\'e Armando Hern\'andez (CB), Miguel Colom (CB, CMLA)
- Abstract要約: 我々は、引用指向のプラクティス、ジャーナルポリシー、レコメンデーション、アーティファクト記述/評価ガイドライン、提出ガイド、技術的進化の間に大きなギャップを見出した。
著者と学術雑誌の関係を,共同で科学的結果を改善するための相互取り組みとして分析した。
我々は,学術論文を著者に提出するための統一的で標準化された再現性ガイドとともに,雑誌政策の勧告を提案する。
- 参考スコア（独自算出の注目度）: 1.446375009535228
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: With the recognized crisis of credibility in scientific research, there is a
growth of reproducibility studies in computer science, and although existing
surveys have reviewed reproducibility from various perspectives, especially
very specific technological issues, they do not address the author-publisher
relationship in the publication of reproducible computational scientific
articles. This aspect requires significant attention because it is the basis
for reliable research. We have found a large gap between the
reproducibility-oriented practices, journal policies, recommendations,
publisher artifact Description/Evaluation guidelines, submission guides,
technological reproducibility evolution, and its effective adoption to
contribute to tackling the crisis. We conducted a narrative survey, a
comprehensive overview and discussion identifying the mutual efforts required
from Authors, Journals, and Technological actors to achieve reproducibility
research. The relationship between authors and scientific journals in their
mutual efforts to jointly improve the reproducibility of scientific results is
analyzed. Eventually, we propose recommendations for the journal policies, as
well as a unified and standardized Reproducibility Guide for the submission of
scientific articles for authors. The main objective of this work is to analyze
the implementation and experiences of reproducibility policies, techniques and
technologies, standards, methodologies, software, and data management tools
required for scientific reproducible publications. Also, the benefits and
drawbacks of such an adoption, as well as open challenges and promising trends,
to propose possible strategies and efforts to mitigate the identified gaps. To
this purpose, we analyzed 200 scientific articles, surveyed 16 Computer Science
journals, and systematically classified them according to reproducibility
strategies, technologies, policies, code citation, and editorial business. We
conclude there is still a reproducibility gap in scientific publications,
although at the same time also the opportunity to reduce this gap with the
joint effort of authors, publishers, and technological providers.
- Abstract（参考訳）: 科学研究における信頼性の危機が認識され、コンピュータ科学における再現可能性の研究が成長し、既存の調査では様々な観点から再現性についてレビューされているが、再現性のある科学論文の出版における著者と出版者の関係には対処していない。
この側面は、信頼できる研究の基盤であるため、大きな注意を要する。
再現性重視のプラクティス,ジャーナルポリシ,レコメンデーション,出版者アーティファクトの説明・評価ガイドライン,提出ガイド,技術的再現性進化,危機対策への効果的な導入との間には,大きなギャップがある。
再現性研究を実現するために,著者,雑誌,技術関係者が必要とする相互努力を総合的に概観し,議論を行った。
論文の再現性を向上させるための相互努力における著者と学術雑誌の関係を分析した。
最終的に、著者への科学論文提出のための統一的で標準化された再現性ガイドとともに、雑誌政策の勧告を提案する。
この研究の主な目的は、再現性ポリシー、技術と技術、標準、方法論、ソフトウェア、および科学的再現性出版に必要なデータ管理ツールの実装と経験を分析することである。
また、そのような採用の利点と欠点、そしてオープンな課題や将来性のあるトレンドは、特定されたギャップを軽減するための戦略と努力を提案する。
そこで本研究では,200の科学論文を分析し,16の学術雑誌を調査し,再現性戦略,技術,政策,コード引用,編集業務に応じて体系的に分類した。
学術出版物にはまだ再現性ギャップがあるが、同時に著者、出版者、技術提供者の協力によってこのギャップを減らす機会もあると結論づけた。
関連論文リスト
- MASSW: A New Dataset and Benchmark Tasks for AI-Assisted Scientific Workflows [58.56005277371235]
我々は,Multi-Aspect Summarization of ScientificAspectsに関する総合テキストデータセットであるMASSWを紹介する。
MASSWには過去50年間にわたる17の主要なコンピュータサイエンスカンファレンスから152,000以上の査読論文が含まれている。
我々は、この新しいデータセットを用いてベンチマーク可能な、複数の新しい機械学習タスクを通じて、MASSWの有用性を実証する。
論文 参考訳（メタデータ） (2024-06-10T15:19:09Z) - ResearchAgent: Iterative Research Idea Generation over Scientific Literature with Large Language Models [56.08917291606421]
ResearchAgentは、大規模言語モデルによる研究アイデア作成エージェントである。
科学文献に基づいて繰り返し精製しながら、問題、方法、実験設計を生成する。
我々は、複数の分野にわたる科学論文に関するResearchAgentを実験的に検証した。
論文 参考訳（メタデータ） (2024-04-11T13:36:29Z) - Insights Towards Better Case Study Reporting in Software Engineering [0.0]
本稿では,ケーススタディレポートの質と影響を高める知見を共有することを目的とする。
ケーススタディでは、確立されたガイドライン、正確な分類、詳細な文脈記述に従うことの必要性を強調した。
我々は,ケーススタディが方法論的に健全であることを保証するために,より厳密でコミュニケーション的な戦略を採用するよう研究者に促すことを目指している。
論文 参考訳（メタデータ） (2024-02-13T12:29:26Z) - Scientific Opinion Summarization: Paper Meta-review Generation Dataset, Methods, and Evaluation [55.00687185394986]
本稿では,論文レビューをメタレビューに合成する,科学的意見要約の課題を提案する。
ORSUMデータセットは、47のカンファレンスから15,062のメタレビューと57,536の論文レビューをカバーしている。
実験の結果,(1)人間による要約は,議論の深みや特定の領域に対するコンセンサスや論争の特定など,必要な基準をすべて満たしていないこと,(2)タスクの分解と反復的自己調整の組み合わせは,意見の強化に強い可能性を示唆している。
論文 参考訳（メタデータ） (2023-05-24T02:33:35Z) - How Data Scientists Review the Scholarly Literature [4.406926847270567]
データサイエンティストの文献レビューの実践について検討する。
データサイエンスは、論文の指数的な増加を示す分野である。
これらの科学者が直面する具体的な実践や課題について、事前の研究は行われていない。
論文 参考訳（メタデータ） (2023-01-10T03:53:05Z) - Artificial intelligence technologies to support research assessment: A
review [10.203602318836444]
この文献レビューは、記事のテキストから、より高いインパクトやより高い品質の研究に関連する指標を特定する。
論文やカンファレンス論文の引用数や品質スコアを予測するために機械学習技術を使用した研究が含まれている。
論文 参考訳（メタデータ） (2022-12-11T06:58:39Z) - Revise and Resubmit: An Intertextual Model of Text-based Collaboration
in Peer Review [52.359007622096684]
ピアレビューは、ほとんどの科学分野における出版プロセスの重要な要素である。
既存のNLP研究は個々のテキストの分析に重点を置いている。
編集補助は、しばしばテキストのペア間の相互作用をモデル化する必要がある。
論文 参考訳（メタデータ） (2022-04-22T16:39:38Z) - Nanopublication-Based Semantic Publishing and Reviewing: A Field Study
with Formalization Papers [0.5735035463793008]
この取り組みにはナノパブリケーションの概念と技術を使用します。
我々は、このRDFベースのフォーマットにおける提出書と最終論文だけでなく、プロセス全体も表現しています。
我々は18人の著者から15件の論文を受け取り、その後出版プロセス全体を通して、その特別号への寄稿の出版に繋がった。
論文 参考訳（メタデータ） (2022-03-03T10:04:10Z) - CitationIE: Leveraging the Citation Graph for Scientific Information
Extraction [89.33938657493765]
引用論文と引用論文の参照リンクの引用グラフを使用する。
最先端技術に対するエンド・ツー・エンドの情報抽出の大幅な改善を観察する。
論文 参考訳（メタデータ） (2021-06-03T03:00:12Z) - What's New? Summarizing Contributions in Scientific Literature [85.95906677964815]
本稿では,論文のコントリビューションと作業状況について,個別の要約を生成するために,論文要約のアンタングル化という新たなタスクを導入する。
本稿では,学術論文のS2ORCコーパスを拡張し,コントリビューション・コントリビューション・コントリビューション・レファレンス・ラベルを付加する。
本稿では, 生成した出力の関連性, 新規性, 絡み合いを報告する総合的自動評価プロトコルを提案する。
論文 参考訳（メタデータ） (2020-11-06T02:23:01Z) - Generating Knowledge Graphs by Employing Natural Language Processing and
Machine Learning Techniques within the Scholarly Domain [1.9004296236396943]
本稿では、自然言語処理と機械学習を利用して研究論文から実体や関係を抽出する新しいアーキテクチャを提案する。
本研究では,現在最先端の自然言語処理ツールとテキストマイニングツールを用いて,知識抽出の課題に取り組む。
セマンティックWebドメイン内の論文26,827件から抽出した109,105件のトリプルを含む科学知識グラフを作成した。
論文 参考訳（メタデータ） (2020-10-28T08:31:40Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。