論文の概要: Beyond Effectiveness: A Multi-Criteria Framework for Comparing Practical Socio-Technical Interventions
- arxiv url: http://arxiv.org/abs/2608.20649v1
- Date: Fri, 21 Aug 2026 01:03:12 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-08-24 14:49:32.311657
- Title: Beyond Effectiveness: A Multi-Criteria Framework for Comparing Practical Socio-Technical Interventions
- Title(参考訳): 有効性を超えて: 実践的社会・技術介入を比較するための多言語フレームワーク
- Abstract要約: 本稿では,社会工学的介入を評価するための多基準枠組みを提案する。
5つの評価基準にまたがる40の運用介入について調査を行った。
専門家が最も効果的であると判断する介入は、必ずしも一般に受け入れられるものではない。
- 参考スコア(独自算出の注目度): 1.9604016708932754
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: Designers and policymakers in sociotechnical domains like content moderation, privacy interfaces, recommender systems and beyond, must choose among a growing menu of proposed interventions, but typically lack a principled basis for comparing them. Prior work tends to evaluate interventions individually and mostly along the effectiveness criteria, while implementation constraints such as cost, effort and feasibility are often considered separately. We present a multi-criteria framework for evaluating sociotechnical interventions. This framework is instantiated through the case of misinformation, a domain of intense focus for proposed countermeasures. We survey $N=39$ researchers on 40 operationalized interventions across five evaluative criteria: political feasibility, effectiveness, user acceptance, cost, and implementation effort. We find that the interventions that experts judge to be the most effective are not always the most acceptable to the public or the most feasible to implement. We also discuss how this tension has implications for the design of sociotechnical interventions beyond misinformation, and offer a decision framework for practitioners navigating the trade-offs of sociotechnical interventions.
- Abstract(参考訳): コンテンツモデレーション、プライバシインターフェース、レコメンデーションシステムなどの社会技術分野のデザイナーや政策立案者は、提案された介入の増大するメニューの中から選ばなければならない。
従来の作業は、個別に、主に有効性基準に沿って介入を評価する傾向がありますが、コスト、労力、実現可能性といった実装上の制約は、しばしば別々に考慮されます。
本稿では,社会工学的介入を評価するための多基準枠組みを提案する。
このフレームワークは、提案された対策に重点を置く、誤情報の場合を通じてインスタンス化される。
政治的実現可能性,有効性,ユーザ受け入れ,コスト,実施労力の5つの評価基準において,40件の運用介入に関する調査をN=39$で実施した。
専門家が最も効果的であると判断する介入は、必ずしも一般に受け入れられるものではなく、最も実施可能な介入である。
また、この緊張感が、誤情報以外の社会技術介入の設計にどのように影響するかについても論じ、社会技術介入のトレードオフをナビゲートする実践者のための意思決定枠組みを提供する。
関連論文リスト
- To Compare, or Not to Compare: On Methodological Practices in Evaluating Social Bias [61.40435736418359]
異質なベンチマークを標準化する統一的なフレームワークを導入し、孤立した人口統計評価と強制選択比較設定を対比する。
比較設定は、主に不特定文脈によって引き起こされる潜在識別のアグレッシブな触媒として機能することを示す。
最後に、この比較偏見はモデルサイズと正にスケールする一般化された現象であることを示す。
論文 参考訳(メタデータ) (2026-06-23T13:53:50Z) - Toward Efficient Agents: Memory, Tool learning, and Planning [96.93533945696156]
本稿では,レイテンシ,トークン,ステップなどのコストを考慮したメモリ,ツール学習,計画という,エージェントの3つのコアコンポーネントの効率性について検討する。
論文 参考訳(メタデータ) (2026-01-20T17:51:56Z) - Expert Preference-based Evaluation of Automated Related Work Generation [54.29459509574242]
本稿では,従来の作業評価基準と専門家固有の嗜好を統合したマルチターン評価フレームワークGREPを提案する。
より優れたアクセシビリティを実現するため、我々はGREPの2つの変種を設計する: プロプライエタリなLLMを評価対象とするより正確な変種と、オープンウェイトなLLMをより安価な代替品である。
論文 参考訳(メタデータ) (2025-08-11T13:08:07Z) - Controversy and consensus: common ground and best practices for life cycle assessment of emerging technologies [3.5210180914841396]
我々は、新興技術に関する6つの主要なトピックにわたる繰り返し議論に対処するために、一連のディスカッションスタイルのワークショップで専門家を招集した。
それぞれの問題に対して、宣言的な解決を示し、それに対する主要な議論を要約し、合意のポイントを特定し、レコメンデーションを提供します。
標準を定式化する時期と、低成熟技術に対していかに広く不確実性を扱えるかは、相変わらず議論が続いている。
論文 参考訳(メタデータ) (2024-12-17T20:30:02Z) - But Can You Use It? Design Recommendations for Differentially Private Interactive Systems [0.499320937849508]
この研究は、公共政策を伝えるために、異なるプライベートな対話システムを開発するための障壁を概説し、考察する。
プライバシ保証,統計ユーティリティ,システムのユーザビリティという,3つの設計上の考慮事項のバランスをとることを提案する。
我々の研究は、公共政策の立案と今後の研究のきっかけとなるために、差別化されたプライベートな対話システムの実践的開発を前進させようとしている。
論文 参考訳(メタデータ) (2024-12-16T14:07:16Z) - Revisiting Technical Bias Mitigation Strategies [0.11510009152620666]
人工知能(AI)コミュニティにおける偏見を緩和し、公平性を高める努力は、主に技術的な解決策に焦点を当てている。
多くのレビューがAIのバイアスに対処しているが、このレビューは医療設定における技術的ソリューションの実践的限界に特化している。
医療・バイオメディカル応用に焦点をあてた実証的研究により,それぞれの限界について解説する。
論文 参考訳(メタデータ) (2024-10-22T21:17:19Z) - Pessimistic Evaluation [58.736490198613154]
情報アクセスシステムの評価は,情報アクセスの伝統に沿わない実用的価値を前提としている。
我々は,最悪のケースユーティリティに着目した情報アクセスシステムの悲観的評価を提唱する。
論文 参考訳(メタデータ) (2024-10-17T15:40:09Z) - IntOPE: Off-Policy Evaluation in the Presence of Interference [22.223761170868386]
オフ・ポリティ・アセスメント(OPE: Off-Policy Evaluation)は、仮説的政策の潜在的影響を評価するために用いられる。
IntIPWはIPWスタイルの推定器で、個々のアクションと隣接するエンティティの影響の両方を考慮し、重要度を極端に統合する。
論文 参考訳(メタデータ) (2024-08-24T06:07:25Z) - Structural Interventions and the Dynamics of Inequality [0.0]
技術的ソリューションは、社会的変化を起こすために、外部のコンテキスト対応の介入と組み合わせなければならないことを示す。
この研究は、構造的不等式が、一見バイアスのない決定機構によって永続することができる方法を強調している。
論文 参考訳(メタデータ) (2024-06-03T13:44:38Z) - Benchmarking PtO and PnO Methods in the Predictive Combinatorial Optimization Regime [59.27851754647913]
予測最適化(英: Predictive optimization)は、エネルギーコストを意識したスケジューリングや広告予算配分など、多くの現実世界のアプリケーションの正確なモデリングである。
我々は,広告のための新しい産業データセットを含む8つの問題に対して,既存のPtO/PnOメソッド11をベンチマークするモジュラーフレームワークを開発した。
本研究は,8ベンチマーク中7ベンチマークにおいて,PnOアプローチがPtOよりも優れていることを示すが,PnOの設計選択に銀の弾丸は見つからない。
論文 参考訳(メタデータ) (2023-11-13T13:19:34Z) - In Search of Insights, Not Magic Bullets: Towards Demystification of the
Model Selection Dilemma in Heterogeneous Treatment Effect Estimation [92.51773744318119]
本稿では,異なるモデル選択基準の長所と短所を実験的に検討する。
選択戦略,候補推定器,比較に用いるデータの間には,複雑な相互作用があることを強調した。
論文 参考訳(メタデータ) (2023-02-06T16:55:37Z) - Online Learning under Budget and ROI Constraints via Weak Adaptivity [57.097119428915796]
制約付きオンライン学習問題に対する既存の原始双対アルゴリズムは、2つの基本的な仮定に依存している。
このような仮定は、標準の原始双対テンプレートを弱適応的後悔最小化器で与えることによって、どのように回避できるのかを示す。
上記の2つの前提が満たされていない場合に保証される、世界の最高の保証を証明します。
論文 参考訳(メタデータ) (2023-02-02T16:30:33Z) - Towards a multi-stakeholder value-based assessment framework for
algorithmic systems [76.79703106646967]
我々は、価値間の近さと緊張を可視化する価値に基づくアセスメントフレームワークを開発する。
我々は、幅広い利害関係者に評価と検討のプロセスを開放しつつ、それらの運用方法に関するガイドラインを提示する。
論文 参考訳(メタデータ) (2022-05-09T19:28:32Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。