論文の概要: Crafting Tomorrow's Evaluations: Assessment Design Strategies in the Era of Generative AI

• arxiv url: http://arxiv.org/abs/2405.01805v1
• Date: Fri, 3 May 2024 01:28:21 GMT
• ステータス: 処理完了
• システム内更新日: 2024-05-06 14:05:10.179657
• Title: Crafting Tomorrow's Evaluations: Assessment Design Strategies in the Era of Generative AI
• Title（参考訳）: 創造的AIの時代におけるデザイン戦略の評価
• Authors: Rajan Kadel, Bhupesh Kumar Mishra, Samar Shailendra, Samia Abid, Maneeha Rani, Shiva Prasad Mahato,
• Abstract要約: GenAIは教育に大きな影響を与え、評価設計と評価方法論を著しく破壊してきた。 主に、学術的完全性、信頼性、アクセスの公平性、評価評価方法論、フィードバックを中心に、いくつかの懸念がある。 本稿では、評価設計と評価に対処する必要がある課題と機会について論じる。
• 参考スコア（独自算出の注目度）: 0.02638878351659022
• License: http://creativecommons.org/licenses/by/4.0/
• Abstract: GenAI has gained the attention of a myriad of users in almost every profession. Its advancement has had an intense impact on education, significantly disrupting the assessment design and evaluation methodologies. Despite the potential benefits and possibilities of GenAI in the education sector, there are several concerns primarily centred around academic integrity, authenticity, equity of access, assessment evaluation methodology, and feedback. Consequently, academia is encountering challenges in assessment design that are essential to retaining academic integrity in the age of GenAI. In this article, we discuss the challenges, and opportunities that need to be addressed for the assessment design and evaluation. The article also highlights the importance of clear policy about the usage of GenAI in completing assessment tasks, and also in design approaches to ensure academic integrity and subject learning. Additionally, this article also provides assessment categorisation based on the use of GenAI to cultivate knowledge among students and academic professionals. It also provides information on the skills necessary to formulate and articulate problems and evaluate the task, enabling students and academics to effectively utilise GenAI tools.
• Abstract（参考訳）: GenAIは、ほぼすべての職業において、無数のユーザの注目を集めている。 その進歩は教育に大きな影響を与え、評価設計と評価方法論を著しく破壊した。 教育分野におけるGenAIの潜在的利益と可能性にもかかわらず、主に学術的完全性、信頼性、アクセスの公平性、評価評価方法論、フィードバックに焦点が当てられている。 その結果、学術的整合性を維持するのに欠かせない評価設計の課題に学界が直面している。 本稿では,評価設計と評価に対処すべき課題と機会について論じる。 論文は、評価タスクの完了や、学術的整合性を確保するためのデザインアプローチにおけるGenAIの利用に関する明確なポリシーの重要性も強調する。 また、本論文は、学生や学術専門家の知識を育成するために、GenAIを用いた評価分類も提供する。 また、課題を定式化し、その課題を評価するために必要なスキルに関する情報も提供し、学生や学者がGenAIツールを効果的に活用できるようにする。

関連論文リスト

• Dimensions of Generative AI Evaluation Design [51.541816010127256]
  我々は、GenAI評価設計に関わる重要な選択を捉えるための一般的な次元のセットを提案する。 これらの次元には、評価設定、タスクタイプ、入力ソース、インタラクションスタイル、期間、メトリックタイプ、スコアリング方法が含まれる。
  論文  参考訳（メタデータ） (2024-11-19T18:25:30Z)
• What Makes a Good Story and How Can We Measure It? A Comprehensive Survey of Story Evaluation [57.550045763103334]
  ストーリーを評価することは、他の世代の評価タスクよりも難しい場合があります。 まず、テキスト・トゥ・テキスト、ビジュアル・トゥ・テキスト、テキスト・トゥ・ビジュアルといった既存のストーリーテリングタスクを要約する。 本研究では,これまで開発されてきた,あるいはストーリー評価に応用可能な評価指標を整理する分類法を提案する。
  論文  参考訳（メタデータ） (2024-08-26T20:35:42Z)
• Framework for Adoption of Generative Artificial Intelligence (GenAI) in Education [0.032771631221674334]
  本研究は、大学教育制度の検証と、GenAIを教育・学習に取り入れることに関連する機会と課題の評価に焦点をあてる。 学術環境におけるGenAIの効果的な統合を阻害する包括的枠組みのギャップと欠如を識別する。
  論文  参考訳（メタデータ） (2024-07-21T12:02:28Z)
• Understanding Student and Academic Staff Perceptions of AI Use in Assessment and Feedback [0.0]
  高等教育における人工知能(AI)と生成人工知能(GenAI)の台頭は、評価改革を必要としている。 本研究は,AIとGenAIツールを用いた学生と学術スタッフの経験を探索することによって,重要なギャップを解消する。 オンライン調査では、ベトナムの2つの大学とシンガポールの1つの大学から35人の研究スタッフと282人の学生のデータを収集した。
  論文  参考訳（メタデータ） (2024-06-22T10:25:01Z)
• ConSiDERS-The-Human Evaluation Framework: Rethinking Human Evaluation for Generative Large Language Models [53.00812898384698]
  生成型大規模言語モデル(LLM)の人間による評価は多分野にわたる作業であるべきだと論じる。 認知バイアスが、流動的な情報や真理をいかに説明するか、そして、認識の不確実性が、Likertのような評価スコアの信頼性にどのように影響するかを強調します。 本稿では,ConSiDERS-The-Human評価フレームワークを提案する。一貫性,スコーリング基準,差別化,ユーザエクスペリエンス,責任,スケーラビリティの6つの柱からなる。
  論文  参考訳（メタデータ） (2024-05-28T22:45:28Z)
• Higher education assessment practice in the era of generative AI tools [0.37282630026096586]
  本研究は,データサイエンス,データ分析,建設管理の3つの指標を用いて実験を行った。 以上の結果から,GenAIツールが主観的知識,問題解決,分析的,批判的思考,プレゼンテーション能力を示すことが明らかとなった。 この結果から,AIツールをHEでの教育や学習に活用する方法を推奨した。
  論文  参考訳（メタデータ） (2024-04-01T10:43:50Z)
• The AI Assessment Scale (AIAS) in action: A pilot implementation of GenAI supported assessment [0.0]
  高等教育におけるジェネレーティブ・人工知能(GenAI)技術の急速な採用は、学術的完全性、評価の実践、学生の学習に関する懸念を引き起こしている。 本稿では,イギリス大学ベトナム校(BUV)でAIAS(Artificial Intelligence Assessment Scale)の実施を探求するパイロット研究の成果を報告する。 AIASは「No AI」から「Full AI」までの5つのレベルから構成されており、教育者は人間の入力と批判的思考を必要とする領域に焦点を当てたアセスメントを設計できる。
  論文  参考訳（メタデータ） (2024-03-15T08:00:02Z)
• The AI Assessment Scale (AIAS): A Framework for Ethical Integration of Generative AI in Educational Assessment [0.0]
  我々は,GenAIツールを教育評価に統合するための,実用的でシンプルで十分に包括的なツールの概要を述べる。 AIアセスメント尺度(AIAS)は、教育者に対して、評価におけるGenAI使用の適切なレベルを選択する権限を与える。 実践的で柔軟なアプローチを採用することで、AIASは、教育におけるGenAIに関する現在の不確実性と不安に対処するための、非常に必要な出発点を形成することができる。
  論文  参考訳（メタデータ） (2023-12-12T09:08:36Z)
• Evaluating General-Purpose AI with Psychometrics [43.85432514910491]
  本稿では,大規模言語モデルなどの汎用AIシステムの包括的かつ正確な評価の必要性について論じる。 現在の評価手法は、主に特定のタスクのベンチマークに基づいており、これらの汎用AIシステムを適切に評価するには不十分である。 これらの課題に対処するため,タスク指向評価から構成指向評価への移行を提案する。
  論文  参考訳（メタデータ） (2023-10-25T05:38:38Z)
• The Role of AI in Drug Discovery: Challenges, Opportunities, and Strategies [97.5153823429076]
  この分野でのAIのメリット、課題、欠点についてレビューする。 データ拡張、説明可能なAIの使用、従来の実験手法とAIの統合についても論じている。
  論文  参考訳（メタデータ） (2022-12-08T23:23:39Z)
• Personalized Education in the AI Era: What to Expect Next? [76.37000521334585]
  パーソナライズ学習の目的は、学習者の強みに合致する効果的な知識獲得トラックをデザインし、目標を達成するために弱みをバイパスすることである。 近年、人工知能(AI)と機械学習(ML)の隆盛は、パーソナライズされた教育を強化するための新しい視点を広げています。
  論文  参考訳（メタデータ） (2021-01-19T12:23:32Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。