論文の概要: Gradeer: An Open-Source Modular Hybrid Grader
- arxiv url: http://arxiv.org/abs/2102.09400v1
- Date: Fri, 12 Feb 2021 21:36:43 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-11 07:59:41.098685
- Title: Gradeer: An Open-Source Modular Hybrid Grader
- Title(参考訳): gradeer: オープンソースのモジュラーハイブリッドグレーダ
- Authors: Benjamin Clegg (1), Maria-Cruz Villa-Uriol (1), Phil McMinn (1),
Gordon Fraser (2) ((1) University of Sheffield, (2) University of Passau)
- Abstract要約: Gradeerはハイブリッドアセスメントツールで、教師は自動アセスメントと手動アセスメントの両方の利点を活用できる。
このツールはモジュラーデザインを特徴とし、新たなグレーディング機能を追加することができる。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Automated assessment has been shown to greatly simplify the process of
assessing students' programs. However, manual assessment still offers benefits
to both students and tutors. We introduce Gradeer, a hybrid assessment tool,
which allows tutors to leverage the advantages of both automated and manual
assessment. The tool features a modular design, allowing new grading
functionality to be added. Gradeer directly assists manual grading, by
automatically loading code inspectors, running students' programs, and allowing
grading to be stopped and resumed in place at a later time. We used Gradeer to
assess an end of year assignment for an introductory Java programming course,
and found that its hybrid approach offers several benefits.
- Abstract(参考訳): 自動評価は、学生のプログラムを評価する過程を大幅に単純化する。
しかし、マニュアルアセスメントは学生と教師の両方に利益をもたらす。
我々は、教師が自動評価と手動評価の両方の利点を活用できるハイブリッドアセスメントツールであるGrageerを紹介した。
このツールはモジュラーデザインを特徴とし、新たなグレーディング機能を追加することができる。
gradeerは、コードインスペクタを自動ロードし、生徒のプログラムを実行し、後でグレーディングを停止し、その場で再開することで、手動のグレーディングを直接支援する。
gradeerを使って、入門のjavaプログラミングコースの年末の割り当てを評価し、そのハイブリッドアプローチがいくつかの利点をもたらすことを見出しました。
関連論文リスト
- A Web App for Teaching Finite State Automata [0.0]
finsm.ioは決定論的および非決定論的有限状態オートマトン(DFA/NFA)の作成、シミュレーション、輸出のためのツールである
本稿では,ツールの基盤となる概念的背景について述べるとともに,複数年,数百人の学生を対象にしたツールの特徴と事前評価について述べる。
予備的な評価では、インストラクターや学生は圧倒的にツールを他人に推奨し、学習と教育を改善したことに同意する。
論文 参考訳(メタデータ) (2024-10-15T23:28:26Z) - Grade Like a Human: Rethinking Automated Assessment with Large Language Models [11.442433408767583]
大規模言語モデル(LLM)は自動階調に使われてきたが、人間と同等のパフォーマンスを達成できていない。
本稿では,次のキーコンポーネントを含むすべてのグルーピング手順に対処するLLMに基づくグルーピングシステムを提案する。
論文 参考訳(メタデータ) (2024-05-30T05:08:15Z) - Improving the Validity of Automatically Generated Feedback via
Reinforcement Learning [50.067342343957876]
強化学習(RL)を用いた正当性と整合性の両方を最適化するフィードバック生成フレームワークを提案する。
具体的には、直接選好最適化(DPO)によるトレーニングのための拡張データセットにおいて、GPT-4のアノテーションを使用してフィードバックペアよりも好みを生成する。
論文 参考訳(メタデータ) (2024-03-02T20:25:50Z) - TOOLVERIFIER: Generalization to New Tools via Self-Verification [69.85190990517184]
本稿では,ツール選択中にコントラスト質問を自己問合せすることで,近接候補を識別する自己検証手法を提案する。
ToolBenchベンチマークによる4つのタスクの実験では、17の見えないツールで構成されており、数ショットのベースラインよりも平均22%改善されている。
論文 参考訳(メタデータ) (2024-02-21T22:41:38Z) - Empowering Private Tutoring by Chaining Large Language Models [87.76985829144834]
本研究は,最先端の大規模言語モデル(LLM)を活用した,本格的な知的チューリングシステムの開発を探求する。
このシステムは、相互に接続された3つのコアプロセス(相互作用、反射、反応)に分けられる。
各プロセスは LLM ベースのツールと動的に更新されたメモリモジュールによって実装される。
論文 参考訳(メタデータ) (2023-09-15T02:42:03Z) - Automated Grading and Feedback Tools for Programming Education: A
Systematic Review [7.776434991976473]
ほとんどの論文はオブジェクト指向言語における代入の正確性を評価する。
ソースコードの保守性、可読性、ドキュメントを評価するツールは少ない。
ほとんどのツールは、ほぼ即時フィードバックを可能にする完全に自動化されたアセスメントを提供する。
論文 参考訳(メタデータ) (2023-06-20T17:54:50Z) - A survey on grading format of automated grading tools for programming
assignments [0.0]
オンラインプラットフォームや研究の普及により、自動グルーピングツールの需要が高まっている。
本研究は,評価形式に基づく自動評価ツールについて検討し,評価する。
論文 参考訳(メタデータ) (2022-12-04T00:49:16Z) - Quiz Design Task: Helping Teachers Create Quizzes with Automated
Question Generation [87.34509878569916]
本稿では,教師が読解クイズを自動生成するためのユースケースに焦点を当てた。
本研究は,クイズを構築中の教師が質問を受講し,それに応じるか,あるいは拒否するかのどちらかを理由として行う。
論文 参考訳(メタデータ) (2022-05-03T18:59:03Z) - An Analysis of Programming Course Evaluations Before and After the
Introduction of an Autograder [1.329950749508442]
本稿では,最近自己評価を導入した基礎的コンピュータ科学コースの標準化された大学評価アンケートに対する回答について検討する。
我々は,教師と生徒の交流の改善,コースの質の向上,学習の成功の向上,時間の短縮,難易度の向上など,データに大きな変化をもたらした可能性について仮説を立てた。
オートグレーダ技術は、プログラミングコースにおける生徒の満足度を向上させるための教育方法として検証することができる。
論文 参考訳(メタデータ) (2021-10-28T14:09:44Z) - ProtoTransformer: A Meta-Learning Approach to Providing Student Feedback [54.142719510638614]
本稿では,フィードバックを数発の分類として提供するという課題について考察する。
メタラーナーは、インストラクターによるいくつかの例から、新しいプログラミング質問に関する学生のコードにフィードバックを与えるように適応します。
本手法は,第1段階の大学が提供したプログラムコースにおいて,16,000名の学生試験ソリューションに対するフィードバックの提供に成功している。
論文 参考訳(メタデータ) (2021-07-23T22:41:28Z) - On the Evaluation of Vision-and-Language Navigation Instructions [76.92085026018427]
自動的に生成されたナビゲーション命令を利用することで、視覚・言語ナビゲーションのウェイフィングエージェントを強化することができる。
既存の命令生成装置は包括的に評価されていない。
BLEU、ROUGE、METEORおよびCIDErは接地ナビゲーションの指示を評価するために有効ではないです。
論文 参考訳(メタデータ) (2021-01-26T01:03:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。