論文の概要: Building a Method: Challenges and Lessons from Developing an Impact Evaluation Framework for Public Investment in Open Source Software
- arxiv url: http://arxiv.org/abs/2611.06281v1
- Date: Wed, 04 Nov 2026 10:22:05 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-11-06 03:25:58.055842
- Title: Building a Method: Challenges and Lessons from Developing an Impact Evaluation Framework for Public Investment in Open Source Software
- Title（参考訳）: メソッドの構築: オープンソースソフトウェアへの公共投資のためのインパクト評価フレームワークの開発から学んだ課題と教訓
- Abstract要約: 本稿では,ソブリン技術庁の質的報告から混合メソッドアプローチへの移行について述べる。
初期設計、遭遇した実践的、構造的課題、そして採用された対応について検討する。
この論文は、オープンソースソフトウェアへの投資を評価することは方法論的なタスクであるだけでなく、ガバナンスの実践でもあると主張している。
- 参考スコア（独自算出の注目度）: 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Modern societies and institutions depend on an invisible layer of open digital infrastructure: foundational, openly accessible digital technologies that support a broad range of social and economic activities. Open source software is a core component of this infrastructure, underpinning everyday technologies and critical systems in various critical sectors. As open source software becomes increasingly recognised, funded, and governed as open digital infrastructure, policymakers face growing demands for accountability, transparency, and credible evidence of impact. However, methods for evaluating public investment in open source software remain underdeveloped, with no widely accepted methodological standard. This paper describes the Sovereign Tech Agency's transition from qualitative reporting and funding-recipient self-assessment towards a mixed-methods approach that incorporates quantitative, goal-oriented evaluation to inform funding decisions. Drawing on the development of this framework, it examines its initial design, the practical and structural challenges encountered, and the responses adopted. The work identifies three central challenges: evaluation indicators must reflect heterogeneous project goals and contexts; quantitative assessment relies on fragmented and fragile data infrastructure; and observed changes before, during, and after investment do not establish causal attribution without additional research designs. The paper argues that evaluating investment in open source software is not only a methodological task but also a governance practice, dependent on sustainable open research infrastructure, community knowledge, and ongoing methodological refinement.
- Abstract（参考訳）: 現代の社会や機関は、オープンなデジタルインフラの目に見えない層に依存している。
オープンソースソフトウェアは、このインフラの中核的なコンポーネントであり、様々な重要な分野における日々の技術や重要なシステムを支える。
オープンソースソフトウェアがオープンなデジタルインフラストラクチャとして認識され、資金提供され、管理されるようになると、政策立案者は、説明責任、透明性、そして信頼できる影響の証拠に対する要求の高まりに直面します。
しかし、オープンソースソフトウェアへの公的投資を評価する方法はまだ未開発であり、広く受け入れられている方法論標準は存在しない。
本稿では,Sovereign Tech Agencyの質的な報告と資金調達による自己評価から,定量的,目標志向的な評価を取り入れて資金調達決定を通知する混合メソッドアプローチへの移行について述べる。
このフレームワークの開発に基づいて、初期設計、遭遇した実践的、構造的課題、そして採用された対応について検討する。
評価指標は異種プロジェクトの目標と状況を反映しなければならない; 定量的評価は断片的で脆弱なデータ基盤に依存している; 投資前、期間、投資後の変化は、さらなる研究設計なしで因果帰属を確立しない。
本論文は,オープンソースソフトウェアへの投資を評価することは方法論的タスクだけではなく,持続可能なオープンリサーチ基盤,コミュニティ知識,進行中の方法論的改善に依存するガバナンスの実践でもある,と論じている。
関連論文リスト
- Measuring the Invisible: Evaluating the Impact of Public Funding on Open Source Software [0.0]
オープンソースソフトウェア(OSS)は、現代のデジタルインフラの重要なレイヤを形成するが、それに依存する機関や社会には、ほとんど見落とされ続けている。
制度的な関心が高まっているにもかかわらず、OSSプロジェクトの持続可能性に対する公的資金の因果的影響は、実証的に未解決のままである。
本研究は,OSSリポジトリ活動に対するSovereign Tech Fundの因果効果を推定するために,Goal-MetricフレームワークとGeneralized Synthetic Control Methodを組み合わせる。
論文 参考訳（メタデータ） (2026-06-16T10:59:48Z) - OpenProposal Platform for Transparent Research Funding Review [0.0]
研究資金配分は科学の進歩において重要なボトルネックとなっている。
従来の資金調達機関は、クローズドなレビューシステムで運営し、説明責任を制限し、体系的な改善を防ぐ。
OpenProposalは、OpenReviewの透明性原則が研究資金提案評価にどのように適合するかを探求する概念実証Webベースのプラットフォームである。
論文 参考訳（メタデータ） (2025-12-15T08:21:42Z) - Who Evaluates AI's Social Impacts? Mapping Coverage and Gaps in First and Third Party Evaluations [37.727313946463276]
最初の包括的な分析は、広範囲のモデル開発者を対象にした、サードパーティとサードパーティのソーシャルインパクト評価レポートである。
ファーストパーティの報告は希少で、しばしば表面的で、環境への影響や偏見といった重要な分野では時間が経つにつれて減少している。
第三者評価者は、偏見、有害なコンテンツ、パフォーマンスの格差を広くより厳格にカバーしている。
論文 参考訳（メタデータ） (2025-11-06T14:25:32Z) - Empowering Real-World: A Survey on the Technology, Practice, and Evaluation of LLM-driven Industry Agents [63.03252293761656]
本稿では,大規模言語モデル(LLM)に基づく産業エージェントの技術,応用,評価手法を体系的にレビューする。
エージェント能力の進歩を支える3つの重要な技術柱として,記憶,計画,ツール利用について検討する。
本稿では,デジタル工学,科学的発見,具体的インテリジェンス,協調ビジネス実行,複雑なシステムシミュレーションといった実世界の領域における産業エージェントの応用の概要について述べる。
論文 参考訳（メタデータ） (2025-10-20T12:46:55Z) - Advancing Digital Government: Integrating Open Source Software Enablement Indicators in Maturity Indexes [0.2291770711277359]
オープンソースソフトウェア(OSS)は、現代のソフトウェアスタックの大部分にまたがる、重要な公益である。
本研究は,OSSを活用した政策分析と支援行動によって,デジタル政府成熟度指数に寄与する。
論文 参考訳（メタデータ） (2025-10-06T09:12:42Z) - Revisiting Vulnerability Patch Localization: An Empirical Study and LLM-Based Solution [44.388332647211776]
オープンソースのソフトウェア脆弱性検出は、ソフトウェアのセキュリティを維持し、ソフトウェアサプライチェーンの整合性を確保するための重要なコンポーネントである。
従来の検出方法は、大量のコミット履歴を処理する際に、大きなスケーラビリティの課題に直面している。
バージョン駆動型候補フィルタリングと大規模言語モデルに基づく多ラウンド対話投票を組み合わせた新しい2段階フレームワークを提案する。
論文 参考訳（メタデータ） (2025-09-19T09:09:55Z) - Developing and Maintaining an Open-Source Repository of AI Evaluations: Challenges and Insights [44.99833362998488]
本稿では,70以上のコミュニティに分散したAI評価のオープンソースリポジトリである$_evals$の8ヶ月間の実践的洞察を紹介する。
AI評価の実装とメンテナンス、ソリューション開発における重要な課題を特定します。
論文 参考訳（メタデータ） (2025-07-09T14:30:45Z) - An Overview of Cyber Security Funding for Open Source Software [3.5880059456896842]
論文ではOSSの2つの資金調達機関と、彼らが出資したプロジェクトについて検討する。
両方の資金調達機関の焦点は、ソフトウェアセキュリティとサイバーセキュリティ全般に向けられている。
論文 参考訳（メタデータ） (2024-12-08T10:48:30Z) - A Toolkit for Measuring the Impacts of Public Funding on Open Source Software Development [0.0]
オープンソースソフトウェア開発に対する公的資金の影響は、まだよく分かっていない。
我々は、肯定的かつ否定的な、潜在的に社会的、経済的、技術的影響の分類を提示する。
このツールキットでは、OSS開発者や社会全体に対する資金提供の価値と影響について、マルチステークホルダーの会話にコントリビュートする。
論文 参考訳（メタデータ） (2024-11-09T01:13:45Z) - Position Paper: Assessing Robustness, Privacy, and Fairness in Federated Learning Integrated with Foundation Models [13.276195878267922]
ファンデーションモデル(FM)をフェデレートラーニング(FL)に統合することは、堅牢性、プライバシ、公正性の点で新しい問題をもたらす。
我々は、関連するトレードオフを分析し、この統合によってもたらされる脅威と問題を明らかにし、これらの課題をナビゲートするための一連の基準と戦略を提案する。
論文 参考訳（メタデータ） (2024-02-02T19:26:00Z) - A Comprehensive Study of Governance Issues in Decentralized Finance
Applications [45.033994319846244]
本稿では,DeFiアプリケーションにおけるガバナンス問題に関する総合的研究について述べる。
私たちは17のWeb3セキュリティ企業から4,446の監査レポートを収集し、構築しています。
スマートコントラクトコードとDeFiホワイトペーパーの相違は、これらのガバナンス問題において中心的な役割を果たす。
論文 参考訳（メタデータ） (2023-11-02T17:46:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。