論文の概要: A Comparative Evaluation of Interventions Against Misinformation:
Augmenting the WHO Checklist
- arxiv url: http://arxiv.org/abs/2212.06696v1
- Date: Tue, 13 Dec 2022 16:09:19 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-19 12:59:40.363300
- Title: A Comparative Evaluation of Interventions Against Misinformation:
Augmenting the WHO Checklist
- Title(参考訳): 情報誤認に対する介入に関する比較評価--WHOチェックリストの強化
- Authors: Hendrik Heuer, Elena Leah Glassman
- Abstract要約: 新型コロナウイルス(COVID-19)のパンデミックの間、世界保健機関(WHO)は、人々が正確な情報と誤報を区別するためのチェックリストを提供した。
この順序付きチェックリストの有用性について検討し、チェックリスト項目の動作コストを下げるための対話型バージョンを設計した。
我々は,両者の正確な情報と誤報を区別する上で,参加者のパフォーマンスの非自明な相違を観察する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: During the COVID-19 pandemic, the World Health Organization provided a
checklist to help people distinguish between accurate and misinformation. In
controlled experiments in the United States and Germany, we investigated the
utility of this ordered checklist and designed an interactive version to lower
the cost of acting on checklist items. Across interventions, we observe
non-trivial differences in participants' performance in distinguishing accurate
and misinformation between the two countries and discuss some possible reasons
that may predict the future helpfulness of the checklist in different
environments. The checklist item that provides source labels was most
frequently followed and was considered most helpful. Based on our empirical
findings, we recommend practitioners focus on providing source labels rather
than interventions that support readers performing their own fact-checks, even
though this recommendation may be influenced by the WHO's chosen order. We
discuss the complexity of providing such source labels and provide design
recommendations.
- Abstract(参考訳): 新型コロナウイルスのパンデミックの間、世界保健機関(WHO)は、人々が正確な情報と誤報を区別するためのチェックリストを提供した。
米国とドイツのコントロール実験において、この注文されたチェックリストの有用性を調査し、チェックリストの項目に作用するコストを下げるためにインタラクティブなバージョンを設計した。
介入を通して,2国間の正確な情報と誤情報の区別における参加者のパフォーマンスの非自明な違いを観察し,異なる環境におけるチェックリストの将来的有用性を予測する可能性のある理由について考察した。
ソースラベルを提供するチェックリストアイテムは、最も頻繁にフォローされ、最も役に立つと考えられていた。
我々の経験的知見に基づき、WHOが選択した命令に影響を受けているとしても、読者のファクトチェックを支援する介入よりも、ソースラベルの提供に重点を置くことを推奨する。
このようなソースラベルの提供の複雑さと,設計上の推奨事項について論じる。
関連論文リスト
- Usefulness of LLMs as an Author Checklist Assistant for Scientific Papers: NeurIPS'24 Experiment [59.09144776166979]
大規模言語モデル(LLM)は、科学的ピアレビューを支援する上で有望だが議論の余地のあるツールである。
本研究は,論文提出を提出基準に適合させるツールとして,会議環境におけるLCMの有用性を評価する。
論文 参考訳(メタデータ) (2024-11-05T18:58:00Z) - Multi-stage Retrieve and Re-rank Model for Automatic Medical Coding Recommendation [22.323705343864336]
国際疾患分類(ICD)は、医学的な分類体系である。
ICDインデックスの主な目的は、ICDコードのサブセットを医療記録に割り当てることである。
既存のほとんどのアプローチは、非常に大きなICDコレクションから適切なラベルサブセットを選択することに苦しんだ。
論文 参考訳(メタデータ) (2024-05-29T13:54:30Z) - FARPLS: A Feature-Augmented Robot Trajectory Preference Labeling System
to Assist Human Labelers' Preference Elicitation [26.06959875347643]
優先度に基づく学習は、ロボットタスクの目的と人間の価値を一致させることを目的としている。
従来の比較に基づく選好ラベリングシステムは、ビデオに記録された複雑な軌跡間の重要な違いをダイジェストし、識別するラベラーをほとんどサポートしない。
FARPLSは、人間にとって重要な様々なタスク機能における潜在的なアウトリーチを強調し、容易にレビューと比較のために対応する動画を抽出する。
また、ユーザの親しみ、軌道対の難しさ、不一致度に応じてラベリング順序を動的に調整する。
論文 参考訳(メタデータ) (2024-03-10T17:07:20Z) - A Bayesian Active Learning Approach to Comparative Judgement [3.0098452499209705]
伝統的なマーキングは、不整合と無意識のバイアスの源であり、評価者に高い認知的負荷を課す。
CJでは、評価者には2つのアイテムが提示され、より良いものを選択するように求められます。
CJはマーキングの信頼できる方法と考えられているが、透明性に関する懸念がある。
比較項目のランクを決定するために,CJ (BCJ) に対する新しいベイズ的アプローチを提案する。
論文 参考訳(メタデータ) (2023-08-25T10:33:44Z) - SPeC: A Soft Prompt-Based Calibration on Performance Variability of
Large Language Model in Clinical Notes Summarization [50.01382938451978]
本稿では,ソフトプロンプトを用いたモデルに依存しないパイプラインを導入し,確率に基づく要約の利点を保ちながら分散を減少させる。
実験結果から,本手法は性能を向上するだけでなく,様々な言語モデルの分散を効果的に抑制することが明らかとなった。
論文 参考訳(メタデータ) (2023-03-23T04:47:46Z) - Consultation Checklists: Standardising the Human Evaluation of Medical
Note Generation [58.54483567073125]
本稿では,コンサルテーションチェックリストの評価を基礎として,客観性向上を目的としたプロトコルを提案する。
このプロトコルを用いた最初の評価研究において,アノテータ間合意の良好なレベルを観察した。
論文 参考訳(メタデータ) (2022-11-17T10:54:28Z) - Recommendation Systems with Distribution-Free Reliability Guarantees [83.80644194980042]
我々は、主に良いアイテムを含むことを厳格に保証されたアイテムのセットを返す方法を示す。
本手法は, 擬似発見率の厳密な有限サンプル制御によるランキングモデルを提供する。
我々はYahoo!のランキングとMSMarcoデータセットの学習方法を評価する。
論文 参考訳(メタデータ) (2022-07-04T17:49:25Z) - Measuring "Why" in Recommender Systems: a Comprehensive Survey on the
Evaluation of Explainable Recommendation [87.82664566721917]
この調査は、IJCAI、AAAI、TheWebConf、Recsys、UMAP、IUIといったトップレベルのカンファレンスから100以上の論文に基づいています。
論文 参考訳(メタデータ) (2022-02-14T02:58:55Z) - Learning Optimal Predictive Checklists [22.91829410102425]
予測チェックリストを2値特徴と単位重みを持つ離散線形分類器として表現する。
次に、整数計画問題の解法により、データからグローバルに最適な予測チェックリストを学習する。
以上の結果から,提案手法はシンプルな予測チェックリストに適合し,よりリッチなカスタム制約に従うように容易にカスタマイズできることがわかった。
論文 参考訳(メタデータ) (2021-12-02T07:15:28Z) - You Are the Best Reviewer of Your Own Papers: An Owner-Assisted Scoring
Mechanism [17.006003864727408]
イソトニックメカニズムは、所有者が提供にインセンティブを与えている特定の情報を活用することで、不正確な生のスコアを改善する。
凸最適化問題を解くことにより,各項目の調整点を報告する。
私は、この所有者支援機構によって提供される調整されたスコアが、レビュアーによって提供される生のスコアよりもかなり正確であることを証明します。
論文 参考訳(メタデータ) (2021-10-27T22:11:29Z) - Do Public Datasets Assure Unbiased Comparisons for Registration
Evaluation? [96.53940048041248]
画像誘導神経外科医の登録をベンチマークするために、2つのデータセットで手動で注釈付けされたランドマークをスクリーニングするために、ヴァリグラムを使用します。
Variograms を用いて, 潜在的に有意な症例を同定し, 経験者により検討した。
論文 参考訳(メタデータ) (2020-03-20T20:04:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。