論文の概要: Assessment Modeling: Fundamental Pre-training Tasks for Interactive
Educational Systems
- arxiv url: http://arxiv.org/abs/2002.05505v6
- Date: Mon, 28 Jun 2021 05:00:25 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-16 09:20:51.682461
- Title: Assessment Modeling: Fundamental Pre-training Tasks for Interactive
Educational Systems
- Title(参考訳): 評価モデル:対話型教育システムのための基礎的事前学習課題
- Authors: Youngduck Choi, Youngnam Lee, Junghyun Cho, Jineon Baek, Dongmin Shin,
Hangyeol Yu, Yugeun Shim, Seewoo Lee, Jonghun Shin, Chan Bae, Byungsoo Kim,
Jaewe Heo
- Abstract要約: ラベルスカース問題を回避する一般的な方法は、学習項目の内容の表現を学習するためのモデルを事前学習することである。
本稿では,総合的な対話型教育システムのための基礎的事前学習課題のクラスであるアセスメント・モデリングを提案する。
- 参考スコア(独自算出の注目度): 3.269851859258154
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Like many other domains in Artificial Intelligence (AI), there are specific
tasks in the field of AI in Education (AIEd) for which labels are scarce and
expensive, such as predicting exam score or review correctness. A common way of
circumventing label-scarce problems is pre-training a model to learn
representations of the contents of learning items. However, such methods fail
to utilize the full range of student interaction data available and do not
model student learning behavior. To this end, we propose Assessment Modeling, a
class of fundamental pre-training tasks for general interactive educational
systems. An assessment is a feature of student-system interactions which can
serve as a pedagogical evaluation. Examples include the correctness and
timeliness of a student's answer. Assessment Modeling is the prediction of
assessments conditioned on the surrounding context of interactions. Although it
is natural to pre-train on interactive features available in large amounts,
limiting the prediction targets to assessments focuses the tasks' relevance to
the label-scarce educational problems and reduces less-relevant noise. While
the effectiveness of different combinations of assessments is open for
exploration, we suggest Assessment Modeling as a first-order guiding principle
for selecting proper pre-training tasks for label-scarce educational problems.
- Abstract(参考訳): 人工知能(AI)の他の多くの領域と同様に、AIEd(AI in Education)の分野には、試験スコアの予測や正当性の検証など、ラベルが不足し高価である特定のタスクがある。
ラベルスカース問題を回避する一般的な方法は、学習項目の内容の表現を学習するためのモデルを事前学習することである。
しかし、このような手法は学生のインタラクションデータを完全に活用できず、生徒の学習行動をモデル化しない。
そこで本研究では,対話型教育システムのための基礎的事前学習課題であるアセスメント・モデリングを提案する。
評価は、教育的評価として機能する学生システム間相互作用の特徴である。
例えば、生徒の答えの正確さや時間軸などである。
アセスメント・モデリング(assestion modeling)は、相互作用の周囲の文脈に基づいたアセスメントの予測である。
対話的特徴の事前訓練を多量に行うことは自然なことではあるが、予測対象を評価に限定することは、ラベルの少ない教育問題に対するタスクの関連性に注目し、関連性の低いノイズを減らす。
アセスメントの異なる組み合わせの有効性は探索にオープンであるが,ラベル・スカーチ問題に対する適切な事前学習タスクを選択するための一階指導原則として評価モデルを提案する。
関連論文リスト
- Self-Training with Pseudo-Label Scorer for Aspect Sentiment Quad Prediction [54.23208041792073]
Aspect Sentiment Quad Prediction (ASQP) は、与えられたレビューに対して全てのクワッド(アスペクト項、アスペクトカテゴリー、意見項、感情極性)を予測することを目的としている。
ASQPタスクにおける重要な課題はラベル付きデータの不足であり、既存のメソッドのパフォーマンスを制限している。
そこで我々は,擬似ラベルスコアラーを用いた自己学習フレームワークを提案し,レビューと擬似ラベルの一致をスコアラーが評価する。
論文 参考訳(メタデータ) (2024-06-26T05:30:21Z) - Continual Action Assessment via Task-Consistent Score-Discriminative Feature Distribution Modeling [31.696222064667243]
アクション品質アセスメント(AQA)は、アクションがどれだけうまく実行されるかに答えようとするタスクである。
既存のAQAの作業は、トレーニングデータはすべて一度にトレーニング用に見えるが、継続的な学習はできないと仮定している。
本稿では,AQAタスクを忘れずに逐次学習するための統一モデルを提案する。
論文 参考訳(メタデータ) (2023-09-29T10:06:28Z) - MoMA: Momentum Contrastive Learning with Multi-head Attention-based
Knowledge Distillation for Histopathology Image Analysis [5.396167537615578]
計算病理学における特定のタスクに関して、品質データの欠如は一般的な問題である。
そこで本研究では,既存のモデルを用いて新たなターゲットモデルを学習する知識蒸留手法を提案する。
本研究では,教師モデルから学習対象モデルを学習するために,学習者・教師の枠組みを用いる。
論文 参考訳(メタデータ) (2023-08-31T08:54:59Z) - Fairness meets Cross-Domain Learning: a new perspective on Models and
Metrics [80.07271410743806]
クロスドメイン学習(CD)とモデルフェアネスの関係について検討する。
いくつかの人口集団にまたがる顔画像と医療画像のベンチマークと、分類とローカライゼーションタスクについて紹介する。
本研究は,3つの最先端フェアネスアルゴリズムとともに,14のCDアプローチをカバーし,前者が後者に勝ることを示す。
論文 参考訳(メタデータ) (2023-03-25T09:34:05Z) - Modelling Assessment Rubrics through Bayesian Networks: a Pragmatic Approach [40.06500618820166]
本稿では,学習者モデルを直接評価ルーリックから導出する手法を提案する。
本稿では,コンピュータ思考のスキルをテストするために開発された活動の人的評価を自動化するために,この手法を適用する方法について述べる。
論文 参考訳(メタデータ) (2022-09-07T10:09:12Z) - Explain, Edit, and Understand: Rethinking User Study Design for
Evaluating Model Explanations [97.91630330328815]
我々はクラウドソーシング研究を行い、真偽のホテルレビューと偽のホテルレビューを区別するために訓練された詐欺検出モデルと対話する。
単語の線形バッグモデルでは、トレーニング中に特徴係数にアクセスした参加者は、非説明制御と比較して、テストフェーズにおいてモデルの信頼性が大幅に低下する可能性があることを観察する。
論文 参考訳(メタデータ) (2021-12-17T18:29:56Z) - Towards Automatic Evaluation of Dialog Systems: A Model-Free Off-Policy
Evaluation Approach [84.02388020258141]
強化学習におけるオフポリシ評価に基づく人間評価スコア推定のための新しいフレームワークであるENIGMAを提案する。
ENIGMAはいくつかの事前収集された経験データしか必要としないため、評価中にターゲットポリシーとのヒューマンインタラクションは不要である。
実験の結果,ENIGMAは人間の評価スコアと相関して既存手法よりも有意に優れていた。
論文 参考訳(メタデータ) (2021-02-20T03:29:20Z) - RADDLE: An Evaluation Benchmark and Analysis Platform for Robust
Task-oriented Dialog Systems [75.87418236410296]
我々はraddleベンチマーク、コーパスのコレクション、および様々なドメインのモデルのパフォーマンスを評価するためのツールを紹介します。
RADDLEは強力な一般化能力を持つモデルを好んで奨励するように設計されている。
先行学習と微調整に基づく最近の最先端システムの評価を行い,異種ダイアログコーパスに基づく基礎的な事前学習が,ドメインごとの個別モデルをトレーニングするよりも優れていることを示す。
論文 参考訳(メタデータ) (2020-12-29T08:58:49Z) - A framework for predicting, interpreting, and improving Learning
Outcomes [0.0]
本研究では,学生の観察的,行動的,受験的特徴に基づいて,テストスコアを予測するEmbibe Score Quotient Model(ESQ)を開発した。
ESQは、学生の将来的な採点可能性の予測や、個別の学習ナッジの提供に使用することができる。
論文 参考訳(メタデータ) (2020-10-06T11:22:27Z) - Neural Multi-Task Learning for Teacher Question Detection in Online
Classrooms [50.19997675066203]
教師の音声記録から質問を自動的に検出するエンドツーエンドのニューラルネットワークフレームワークを構築している。
マルチタスク学習手法を取り入れることで,質問の種類によって意味的関係の理解を深めることが可能となる。
論文 参考訳(メタデータ) (2020-05-16T02:17:04Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。