論文の概要: A Multistakeholder Approach to Value-Driven Co-Design of Recommender System Evaluation Metrics in Digital Archives
- arxiv url: http://arxiv.org/abs/2507.03556v1
- Date: Fri, 04 Jul 2025 13:09:08 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-07-08 15:46:34.778569
- Title: A Multistakeholder Approach to Value-Driven Co-Design of Recommender System Evaluation Metrics in Digital Archives
- Title(参考訳): デジタルアーカイブにおけるレコメンダシステム評価指標の共有設計へのマルチステークホルダーアプローチ
- Authors: Florian Atzenhofer-Baumgartner, Georg Vogeler, Dominik Kowald,
- Abstract要約: 本稿では、多様な利害関係者の値をRecommender Systems(RecSys)の評価基準に翻訳する最初のマルチステークホルダーアプローチを提案する。
我々のコントリビューションはデジタルアーカイブを超えて広くRecSysコミュニティに広がり、即時消費ではなく持続的なエンゲージメントを通じて価値が生まれるドメインに対して、転送可能な評価アプローチを提供しています。
- 参考スコア(独自算出の注目度): 0.8261182037130406
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: This paper presents the first multistakeholder approach for translating diverse stakeholder values into an evaluation metric setup for Recommender Systems (RecSys) in digital archives. While commercial platforms mainly rely on engagement metrics, cultural heritage domains require frameworks that balance competing priorities among archivists, platform owners, researchers, and other stakeholders. To address this challenge, we conducted high-profile focus groups (5 groups x 5 persons) with upstream, provider, system, consumer, and downstream stakeholders, identifying value priorities across critical dimensions: visibility/representation, expertise adaptation, and transparency/trust. Our analysis shows that stakeholder concerns naturally align with four sequential research funnel stages: discovery, interaction, integration, and impact. The resulting framework addresses domain-specific challenges including collection representation imbalances, non-linear research patterns, and tensions between specialized expertise and broader accessibility. We propose tailored metrics for each stage in this research journey, such as research path quality for discovery, contextual appropriateness for interaction, metadata-weighted relevance for integration, and cross-stakeholder value alignment for impact assessment. Our contributions extend beyond digital archives to the broader RecSys community, offering transferable evaluation approaches for domains where value emerges through sustained engagement rather than immediate consumption.
- Abstract(参考訳): 本稿では,デジタルアーカイブにおけるレコメンダシステム(Recommender Systems, RecSys, Recommender Systems, Recommender Systems, RecSys, Recommender Systems, Recommender Systems, RecSys, Recommender Systems, Recommender Systems, RecSys, Recommender Systems, Recommender Systems, Recommender Systems, RecSys, Recommender Systems, Recommender Systems, RecSys, Recommender Systems, Recommender Systems, RecSys, RecomSys, Recommender Systems, Recommender Systems, Recommender Systems, RecSys, RecSy
商業プラットフォームは主にエンゲージメント指標に依存しているが、文化遺産ドメインは考古学者、プラットフォーム所有者、研究者、その他のステークホルダーの間で競合する優先順位のバランスをとるフレームワークを必要とする。
この課題に対処するため、私たちは、上流、プロバイダ、システム、コンシューマ、下流のステークホルダーとともに、目立ったフォーカスグループ(5グループ×5人)を実施、可視性/表現、専門的適応、透明性/信頼といった重要な領域で価値の優先順位を特定しました。
我々の分析によると、ステークホルダーの懸念は、発見、相互作用、統合、影響の4つの連続した研究段階と自然に一致している。
このフレームワークは、コレクション表現の不均衡、非線形研究パターン、専門的な専門知識とより広範なアクセシビリティの間の緊張など、ドメイン固有の課題に対処する。
本稿では,発見のための研究パスの品質,インタラクションのための文脈的適切性,統合のためのメタデータ重み付け関連性,影響評価のためのステークホルダー価値アライメントなど,この研究の段階ごとに調整されたメトリクスを提案する。
我々のコントリビューションはデジタルアーカイブを超えて広くRecSysコミュニティに広がり、即時消費ではなく持続的なエンゲージメントを通じて価値が生まれるドメインに対して、転送可能な評価アプローチを提供しています。
関連論文リスト
- OpenReview Should be Protected and Leveraged as a Community Asset for Research in the Era of Large Language Models [55.21589313404023]
OpenReviewは、研究論文、ピアレビュー、著者の反論、メタレビュー、決定結果の継続的な進化を続けるリポジトリである。
OpenReviewは、ピアレビュープロセスの品質、スケーラビリティ、説明責任の向上、真に専門家の議論に根ざした有意義でオープンなベンチマークの実現、専門家の評価、意図、科学的価値を反映した現実世界のインタラクションによるアライメント研究の支援という、ユニークな貢献が可能な3つの領域を強調します。
コミュニティは、OpenReviewに関する標準化されたベンチマークと利用ガイドラインを共同で検討し、責任あるデータの使用、倫理的考慮、集団スチュワードシップに関するより広範な対話を招待することを提案します。
論文 参考訳(メタデータ) (2025-05-24T09:07:13Z) - Personalized Generation In Large Model Era: A Survey [90.7579254803302]
大規模モデルの時代には、コンテンツ生成は徐々にパーソナライズドジェネレーション(PGen)へとシフトしている。
本報告では,PGen に関する総合的な調査を行い,この急速に成長する分野における既存研究について考察する。
複数のモダリティにまたがるPGen研究をブリッジすることで、この調査は知識共有と学際的コラボレーションを促進する貴重な情報源となる。
論文 参考訳(メタデータ) (2025-03-04T13:34:19Z) - De-centering the (Traditional) User: Multistakeholder Evaluation of Recommender Systems [10.731079374109596]
我々は,レコメンデータシステムのマルチステークホルダー評価の課題に焦点をあてる。
理論的原理から実践的実装への移行について論じる。
我々は,これらの複雑で領域依存的な評価問題の導入について,研究者や実践者にガイダンスを提供することを目的としている。
論文 参考訳(メタデータ) (2025-01-09T11:44:49Z) - Value Identification in Multistakeholder Recommender Systems for Humanities and Historical Research: The Case of the Digital Archive Monasterium.net [9.24340769982606]
本稿では、Monasterium.netのレコメンデーションによって影響を受ける可能性のある、複数の利害関係者の初歩的な価値識別を提供する。
筆者らは,編集者,アグリゲータ,プラットフォーム所有者,研究者,出版社,資金調達機関など,利害関係者のさまざまな価値と目的について論じる。
論文 参考訳(メタデータ) (2024-09-26T12:07:46Z) - Towards a multi-stakeholder value-based assessment framework for
algorithmic systems [76.79703106646967]
我々は、価値間の近さと緊張を可視化する価値に基づくアセスメントフレームワークを開発する。
我々は、幅広い利害関係者に評価と検討のプロセスを開放しつつ、それらの運用方法に関するガイドラインを提示する。
論文 参考訳(メタデータ) (2022-05-09T19:28:32Z) - Personalized multi-faceted trust modeling to determine trust links in
social media and its potential for misinformation management [61.88858330222619]
ソーシャルメディアにおけるピア間の信頼関係を予測するためのアプローチを提案する。
本稿では,データ駆動型多面信頼モデルを提案する。
信頼を意識したアイテムレコメンデーションタスクで説明され、提案したフレームワークを大規模なYelpデータセットのコンテキストで評価する。
論文 参考訳(メタデータ) (2021-11-11T19:40:51Z) - Choosing the Best of Both Worlds: Diverse and Novel Recommendations
through Multi-Objective Reinforcement Learning [68.45370492516531]
本稿では,Recommender Systems (RS) 設定のための拡張多目的強化学習(SMORL)を紹介する。
SMORLエージェントは、標準レコメンデーションモデルを拡張し、RLレイヤーを追加し、3つの主要な目的(正確性、多様性、新しいレコメンデーション)を同時に満たすように強制する。
実世界の2つのデータセットに対する実験結果から,集約的多様性の顕著な増加,精度の適度な向上,レコメンデーションの反復性の低下,および相補的目的としての多様性と新規性の強化の重要性が示された。
論文 参考訳(メタデータ) (2021-10-28T13:22:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。