論文の概要: Beyond Fair Pay: Ethical Implications of NLP Crowdsourcing
- arxiv url: http://arxiv.org/abs/2104.10097v1
- Date: Tue, 20 Apr 2021 16:30:59 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-21 13:37:15.346267
- Title: Beyond Fair Pay: Ethical Implications of NLP Crowdsourcing
- Title(参考訳): 公正報酬を超えて - NLPクラウドソーシングの倫理的意味
- Authors: Boaz Shmueli, Jan Fell, Soumya Ray, Lun-Wei Ku
- Abstract要約: 研究者が使用する共通の倫理的枠組みであるFinal Ruleは,データ収集にオンラインクラウドソーシングプラットフォームを使用することを期待していなかった。
NLPタスクを実行するクラウドワーカーが危険にさらされる一般的なシナリオを列挙します。
我々は,ベルモント報告書が定める3つの倫理的原則を考慮し,これらのリスクを評価することを推奨する。
- 参考スコア(独自算出の注目度): 7.148585157154561
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The use of crowdworkers in NLP research is growing rapidly, in tandem with
the exponential increase in research production in machine learning and AI.
Ethical discussion regarding the use of crowdworkers within the NLP research
community is typically confined in scope to issues related to labor conditions
such as fair pay. We draw attention to the lack of ethical considerations
related to the various tasks performed by workers, including labeling,
evaluation, and production. We find that the Final Rule, the common ethical
framework used by researchers, did not anticipate the use of online
crowdsourcing platforms for data collection, resulting in gaps between the
spirit and practice of human-subjects ethics in NLP research. We enumerate
common scenarios where crowdworkers performing NLP tasks are at risk of harm.
We thus recommend that researchers evaluate these risks by considering the
three ethical principles set up by the Belmont Report. We also clarify some
common misconceptions regarding the Institutional Review Board (IRB)
application. We hope this paper will serve to reopen the discussion within our
community regarding the ethical use of crowdworkers.
- Abstract(参考訳): NLP研究におけるクラウドワーカーの利用は、機械学習とAIにおける研究生産の指数的な増加と相まって急速に増加している。
NLP研究コミュニティにおけるクラウドワーカーの使用に関する倫理的議論は、通常、公正な賃金のような労働条件に関連する問題の範囲に限られる。
我々は,労働者が行う様々なタスク,例えばラベル付け,評価,生産に関する倫理的配慮の欠如に注目した。
研究者が使用する一般的な倫理的枠組みであるFinal Ruleは,データ収集にオンラインクラウドソーシングプラットフォームを使用することを予想していなかったため,NLP研究における人間対象倫理の精神と実践のギャップが生じた。
我々は,NLPタスクを行うクラウドワーカーが害の危険にさらされる一般的なシナリオを列挙する。
そこで我々は,ベルモント報告書の定める3つの倫理的原則を考慮し,これらのリスクを評価することを推奨する。
また,Institutional Review Board(IRB)の適用に関する一般的な誤解を明らかにした。
この論文は、クラウドワーカーの倫理的利用に関するコミュニティ内の議論の再開に役立てることを願っている。
関連論文リスト
- Ethics Whitepaper: Whitepaper on Ethical Research into Large Language Models [53.316174782223115]
このホワイトペーパーは、大規模言語モデル(LLM)の研究を取り巻く倫理的考察の概要を提供する。
LLMが広く使われるアプリケーションに統合されるにつれて、その社会的影響が増大し、重要な倫理的疑問が前面に浮かび上がっている。
論文 参考訳(メタデータ) (2024-10-17T18:36:02Z) - What Can Natural Language Processing Do for Peer Review? [173.8912784451817]
現代の科学ではピアレビューが広く使われているが、それは難しく、時間がかかり、エラーを起こしやすい。
ピアレビューに関わるアーティファクトは大部分がテキストベースであるため、自然言語処理はレビューを改善する大きな可能性を秘めている。
筆者らは、原稿提出からカメラ対応リビジョンまでの各工程について詳述し、NLP支援の課題と機会について論じる。
論文 参考訳(メタデータ) (2024-05-10T16:06:43Z) - Responsible AI Considerations in Text Summarization Research: A Review
of Current Practices [89.85174013619883]
私たちは、責任あるAIコミュニティがほとんど見落としている共通のNLPタスクである、テキスト要約に重点を置いています。
我々は,2020-2022年に出版されたACLアンソロジーから333の要約論文の多段階的質的分析を行った。
私たちは、どの、どの、どの責任あるAI問題がカバーされているか、どの関係するステークホルダーが考慮されているか、そして、述べられた研究目標と実現された研究目標のミスマッチに焦点を合わせます。
論文 参考訳(メタデータ) (2023-11-18T15:35:36Z) - Regulation and NLP (RegNLP): Taming Large Language Models [51.41095330188972]
我々は,NLP研究が規制研究や隣接分野に近接することのメリットを論じる。
我々は、規制とNLPに関する新しい多分野研究空間の開発を提唱する。
論文 参考訳(メタデータ) (2023-10-09T09:22:40Z) - The ethical ambiguity of AI data enrichment: Measuring gaps in research
ethics norms and practices [2.28438857884398]
この研究は、AI研究とデータ豊か化のために、同等な研究倫理要件と規範がどのように開発されたか、そしてどの程度まで調査する。
主要なAI会場は、人間のデータ収集のためのプロトコルを確立し始めているが、これらは矛盾なく著者が追従している。
論文 参考訳(メタデータ) (2023-06-01T16:12:55Z) - Thorny Roses: Investigating the Dual Use Dilemma in Natural Language
Processing [45.72382504913193]
我々は,NLP研究者と実践者を対象に,問題の深さと展望を理解するために調査を行った。
調査の結果に基づき,NLPコミュニティのニーズに合わせた二重利用の定義を提供する。
我々は、NLPにおける二重利用を緩和する現在の状況と潜在的手段について議論し、既存の会議倫理枠組みに統合可能なチェックリストを提案する。
論文 参考訳(メタデータ) (2023-04-17T14:37:43Z) - Use of Formal Ethical Reviews in NLP Literature: Historical Trends and
Current Practices [6.195761193461355]
近年,言語技術研究の倫理的側面が注目されている。
専門的な倫理委員会・委員会によって審査・承認された人間の被験者を対象とする研究を得るための標準的慣行である。
NLPの倫理に関する懸念や議論が高まり、NLP研究の形式的倫理的レビューの高まりも観察できるだろうか?
論文 参考訳(メタデータ) (2021-06-02T12:12:59Z) - Case Study: Deontological Ethics in NLP [119.53038547411062]
我々はNLPの観点から1つの倫理理論、すなわち非オントロジー的倫理について研究する。
特に、インフォームド・コンセントを通じて、一般化原則と自律性への敬意に焦点を当てる。
NLPシステムでこれらの原則をどのように利用できるかを示すための4つのケーススタディを提供する。
論文 参考訳(メタデータ) (2020-10-09T16:04:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。