論文の概要: Registered Report: A Laboratory Experiment on Using Different
Financial-Incentivization Schemes in Software-Engineering Experimentation
- arxiv url: http://arxiv.org/abs/2202.10985v4
- Date: Wed, 14 Feb 2024 06:50:50 GMT
- ステータス: 処理完了
- システム内更新日: 2024-02-15 20:35:16.101075
- Title: Registered Report: A Laboratory Experiment on Using Different
Financial-Incentivization Schemes in Software-Engineering Experimentation
- Title(参考訳): 登録報告:ソフトウェア工学実験における金融インセンティブの異なるスキームの利用実験
- Authors: Jacob Kr\"uger (1), G\"ul \c{C}al{\i}kl{\i} (2), Dmitri Bershadskyy
(3), Robert Heyer (3), Sarah Zabel (3 and 4), Siegmar Otto (3 and 4) ((1)
Ruhr-University Bochum Germany (2) University of Glasgow UK, (3)
Otto-von-Guericke University Magdeburg Germany, (4) University of Hohenheim
Germany)
- Abstract要約: 我々は,制御された実験室実験を行うための調査を計画している。
我々は、この調査を、ペイオフ機能として採用するインセンティブ化スキームの活用に利用します。
私たちのコントリビューションは、実世界のシナリオだけでなく、実験における開発者に対する金銭的インセンティブの影響を理解する上でも役立ちます。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Empirical studies in software engineering are often conducted with
open-source developers or in industrial collaborations. Seemingly, this
resulted in few experiments using financial incentives (e.g., money, vouchers)
as a strategy to motivate the participants' behavior; which is typically done
in other research communities, such as economics or psychology. Even the
current version of the SIGSOFT Empirical Standards does mention payouts for
completing surveys only, but not for mimicking the real-world or motivating
realistic behavior during experiments. So, there is a lack of understanding
regarding whether financial incentives can or cannot be useful for
software-engineering experimentation. To tackle this problem, we plan a survey
based on which we will conduct a controlled laboratory experiment. Precisely,
we will use the survey to elicit incentivization schemes we will employ as (up
to) four payoff functions (i.e., mappings of choices or performance in an
experiment to a monetary payment) during a code-review task in the experiment:
(1) a scheme that employees prefer, (2) a scheme that is actually employed, (3)
a scheme that is performance-independent, and (4) a scheme that mimics an
open-source scenario. Using a between-subject design, we aim to explore how the
different schemes impact the participants' performance. Our contributions help
understand the impact of financial incentives on developers in experiments as
well as real-world scenarios, guiding researchers in designing experiments and
organizations in compensating developers.
- Abstract(参考訳): ソフトウェアエンジニアリングにおける実証的研究は、しばしばオープンソース開発者や産業コラボレーションによって行われる。
この結果、経済的インセンティブ(例えば金、ブーチャー)を参加者の行動を動機づける戦略として使う実験はほとんどなく、経済や心理学など他の研究コミュニティで一般的に行われている。
SIGSOFT Empirical Standardsの現行版でさえ、調査の完了のみの報酬について言及しているが、実際の世界を模倣したり、実験中に現実的な行動を動機付けるためのものではない。
したがって、金融インセンティブがソフトウェアエンジニアリングの実験に有効であるかどうかについての理解の欠如がある。
この問題に対処するため,我々は,制御された実験室実験を行うための調査を計画している。
正確には、調査によって、実験中のコードレビュータスク中の4つのペイオフ機能(すなわち、実験における選択やパフォーマンスのマッピング)として採用するインセンティブ化スキーム、(1)従業員が好むスキーム、(2)実際に採用されるスキーム、(3)パフォーマンス非依存のスキーム、(4)オープンソースのシナリオを模倣したスキームを導き出す。
対象間の設計を用いて、異なるスキームが参加者のパフォーマンスに与える影響を検討する。
私たちのコントリビューションは、実験における開発者に対する金銭的インセンティブの影響、実世界のシナリオ、実験の設計における研究者の指導、開発者補償のための組織などを理解するのに役立ちます。
関連論文リスト
- Impact of Usability Mechanisms: A Family of Experiments on Efficiency, Effectiveness and User Satisfaction [0.5419296578793327]
ベースライン実験における結果の精度と一般化を高めるために、3つの実験のファミリーを用いる。
システムのユーザビリティは, 効率, 有効性, ユーザ満足度に関して大きく向上していると考えられる。
論文 参考訳(メタデータ) (2024-08-22T21:23:18Z) - On (Mis)perceptions of testing effectiveness: an empirical study [1.8026347864255505]
本研究の目的は, 異なる手法の欠陥検出の有効性の認識が, 先行経験の欠如において, 実際の有効性とどの程度一致しているかを明らかにすることである。
本研究は,2つのテスト手法とコードレビュー手法を適用した学生を対象に,制御実験を行った。
実験の最後には、どのテクニックが最も効果的かを調べる調査が行われた。
再現された研究の結果は、元の研究の結果を確認し、参加者の認識は、テクニックの複雑さや嗜好についての意見ではなく、そのテクニックを適用したと考えることについての意見に基づいているかもしれないことを示唆している。
論文 参考訳(メタデータ) (2024-02-11T14:50:01Z) - Conducting A/B Experiments with a Scalable Architecture [0.6990493129893112]
A/B実験は、2つの異なる実験グループにおいて1つ以上の変数を変更する効果を比較するために一般的に用いられる。
ドメインに依存しないA/B実験を支援するソフトウェアアーキテクチャを開発するための4つの基本的アプローチを提案する。
論文 参考訳(メタデータ) (2023-09-23T18:38:28Z) - PyExperimenter: Easily distribute experiments and track results [63.871474825689134]
PyExperimenterは、アルゴリズムの実験的な研究結果のセットアップ、ドキュメンテーション、実行、およびその後の評価を容易にするツールである。
人工知能の分野で研究者が使用することを意図しているが、それらに限定されていない。
論文 参考訳(メタデータ) (2023-01-16T10:43:02Z) - Benchopt: Reproducible, efficient and collaborative optimization
benchmarks [67.29240500171532]
Benchoptは、機械学習で最適化ベンチマークを自動化、再生、公開するためのフレームワークである。
Benchoptは実験を実行、共有、拡張するための既製のツールを提供することで、コミュニティのベンチマークを簡単にする。
論文 参考訳(メタデータ) (2022-06-27T16:19:24Z) - Towards Continuous Compounding Effects and Agile Practices in
Educational Experimentation [2.7094829962573304]
本稿では,異なる実験過程を分類する枠組みを定義する。
次世代の教育技術の成功は、プロセスの完全な集合を取り入れることによって後押しされる。
論文 参考訳(メタデータ) (2021-11-17T13:10:51Z) - The Efficiency Misnomer [50.69516433266469]
我々は、共通のコスト指標、それらの利点とデメリット、そしてそれらが相互に矛盾する方法について論じる。
コストインジケータの不完全な報告が、どのようにして部分的な結論をもたらすかを示し、異なるモデルの実践的考察の曖昧さや不完全さを図示する。
論文 参考訳(メタデータ) (2021-10-25T12:48:07Z) - StudyMe: A New Mobile App for User-Centric N-of-1 Trials [68.8204255655161]
N-of-1臨床試験は、個人が個人の健康目標に対する介入の効果を体系的に評価できる多種多様な自己実験である。
StudyMeはオープンソースのモバイルアプリで、https://play.google.com/store/apps/details?id=health.studyu.me.comから無料で利用できる。
論文 参考訳(メタデータ) (2021-07-31T20:43:36Z) - Scaling up Search Engine Audits: Practical Insights for Algorithm
Auditing [68.8204255655161]
異なる地域に数百の仮想エージェントを配置した8つの検索エンジンの実験を行った。
複数のデータ収集にまたがる研究インフラの性能を実証する。
仮想エージェントは,アルゴリズムの性能を長時間にわたって監視するための,有望な場所である,と結論付けている。
論文 参考訳(メタデータ) (2021-06-10T15:49:58Z) - On Course, But Not There Yet: Enterprise Architecture Conformance and
Benefits in Systems Development [1.5071503188049546]
エンタープライズアーキテクチャ(EA)が個々のシステム開発プロジェクトと組織全体に対してもたらすメリットについて、さまざまな主張がなされています。
本稿では,これらの主張を実証的に検証するために実施された調査(n=293)の統計的知見について述べる。
論文 参考訳(メタデータ) (2020-08-23T14:00:55Z) - Cost-Sensitive Portfolio Selection via Deep Reinforcement Learning [100.73223416589596]
深層強化学習を用いたコスト依存型ポートフォリオ選択手法を提案する。
具体的には、価格系列パターンと資産相関の両方を抽出するために、新しい2ストリームポートフォリオポリシーネットワークを考案した。
蓄積したリターンを最大化し、強化学習によるコストの両立を抑えるため、新たなコスト感受性報酬関数が開発された。
論文 参考訳(メタデータ) (2020-03-06T06:28:17Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。