論文の概要: A survey on grading format of automated grading tools for programming
assignments
- arxiv url: http://arxiv.org/abs/2212.01714v1
- Date: Sun, 4 Dec 2022 00:49:16 GMT
- ステータス: 処理完了
- システム内更新日: 2023-02-19 12:50:23.785851
- Title: A survey on grading format of automated grading tools for programming
assignments
- Title(参考訳): プログラミング課題の自動グルーピングツールのグルーピング形式に関する調査
- Authors: Aditi Agrawal, Benjamin Reed
- Abstract要約: オンラインプラットフォームや研究の普及により、自動グルーピングツールの需要が高まっている。
本研究は,評価形式に基づく自動評価ツールについて検討し,評価する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: The prevalence of online platforms and studies has generated the demand for
automated grading tools, and as a result, there are plenty in the market. Such
tools are developed to grade coding assignments quickly, accurately, and
effortlessly. Since there are varieties of tools available to cater to the
diverse options of programming languages and concepts, it is overwhelming for
any instructor to decide which one suits one's requirements. There are several
surveys studying the tools and giving insights into how they function and what
they support. However other than knowing the functionality, it is important for
an instructor to know how the assignments are graded and what is the format of
the test cases. This is crucial since the instructor has to design the grading
format and therefore requires a learning curve. This survey studies and
evaluates the automated grading tools based on their evaluation format. This in
turn helps a reader in deciding which tool to choose and provides an insight
into what are the assessment settings and approaches used in grading the coding
assignment in any specific grading tool.
- Abstract(参考訳): オンラインプラットフォームや研究が普及したことで、自動採点ツールの需要が高まり、その結果、市場にはたくさんのものが存在する。
このようなツールは、コーディングの割り当てを素早く、正確に、努力的に評価するために開発されている。
プログラミング言語や概念の多様な選択肢に対応できる様々なツールがあるので、どのインストラクターが自分の要求に合うかを決めることは圧倒的である。
ツールについて調査し、機能やサポート内容に関する洞察を提供する調査がいくつか行われている。
しかし、機能を知ること以外は、インストラクターが、割り当てがどのように評価され、テストケースの形式が何かを知ることが重要です。
これはインストラクタがグレーディングフォーマットを設計しなければならないため、学習曲線を必要とするため重要です。
本調査は,評価形式に基づいて自動採点ツールを調査し,評価する。
このことは、読者がどのツールを選択するかを決めるのに役立ち、特定のグレーティングツールのコーディング代入のグレードに使用する評価設定とアプローチに関する洞察を提供するのに役立つ。
関連論文リスト
- Creating a Trajectory for Code Writing: Algorithmic Reasoning Tasks [0.923607423080658]
本稿では,楽器とその検証に用いる機械学習モデルについて述べる。
我々は,学期最後の週に導入プログラミングコースで収集したデータを用いてきた。
先行研究は、ARTタイプの楽器を特定の機械学習モデルと組み合わせて効果的な学習軌道として機能させることができることを示唆している。
論文 参考訳(メタデータ) (2024-04-03T05:07:01Z) - What Are Tools Anyway? A Survey from the Language Model Perspective [67.18843218893416]
言語モデル(LM)は強力だが、主にテキスト生成タスクに向いている。
LMが使用する外部プログラムとしてツールを統一的に定義する。
各種ツールの効率を実証的に検討した。
論文 参考訳(メタデータ) (2024-03-18T17:20:07Z) - TOOLVERIFIER: Generalization to New Tools via Self-Verification [69.85190990517184]
本稿では,ツール選択中にコントラスト質問を自己問合せすることで,近接候補を識別する自己検証手法を提案する。
ToolBenchベンチマークによる4つのタスクの実験では、17の見えないツールで構成されており、数ショットのベースラインよりも平均22%改善されている。
論文 参考訳(メタデータ) (2024-02-21T22:41:38Z) - Automated Grading and Feedback Tools for Programming Education: A
Systematic Review [7.776434991976473]
ほとんどの論文はオブジェクト指向言語における代入の正確性を評価する。
ソースコードの保守性、可読性、ドキュメントを評価するツールは少ない。
ほとんどのツールは、ほぼ即時フィードバックを可能にする完全に自動化されたアセスメントを提供する。
論文 参考訳(メタデータ) (2023-06-20T17:54:50Z) - ELEVATER: A Benchmark and Toolkit for Evaluating Language-Augmented
Visual Models [102.63817106363597]
ELEVATERは、事前訓練された言語拡張ビジュアルモデルの比較と評価を行う最初のベンチマークである。
20の画像分類データセットと35のオブジェクト検出データセットで構成され、それぞれが外部知識で拡張されている。
研究コミュニティ向けのツールキットと評価プラットフォームをリリースします。
論文 参考訳(メタデータ) (2022-04-19T10:23:42Z) - An Analysis of Programming Course Evaluations Before and After the
Introduction of an Autograder [1.329950749508442]
本稿では,最近自己評価を導入した基礎的コンピュータ科学コースの標準化された大学評価アンケートに対する回答について検討する。
我々は,教師と生徒の交流の改善,コースの質の向上,学習の成功の向上,時間の短縮,難易度の向上など,データに大きな変化をもたらした可能性について仮説を立てた。
オートグレーダ技術は、プログラミングコースにおける生徒の満足度を向上させるための教育方法として検証することができる。
論文 参考訳(メタデータ) (2021-10-28T14:09:44Z) - Using Personality Detection Tools for Software Engineering Research: How
Far Can We Go? [12.56413718364189]
自己評価アンケートは、大規模に複数の観察を収集するための実践的な解決策ではない。
非技術的コーパスでトレーニングされたオフザシェルフソリューションは、ソフトウェア工学のような技術的な領域では、容易には適用できないかもしれない。
論文 参考訳(メタデータ) (2021-10-11T07:02:34Z) - ProtoTransformer: A Meta-Learning Approach to Providing Student Feedback [54.142719510638614]
本稿では,フィードバックを数発の分類として提供するという課題について考察する。
メタラーナーは、インストラクターによるいくつかの例から、新しいプログラミング質問に関する学生のコードにフィードバックを与えるように適応します。
本手法は,第1段階の大学が提供したプログラムコースにおいて,16,000名の学生試験ソリューションに対するフィードバックの提供に成功している。
論文 参考訳(メタデータ) (2021-07-23T22:41:28Z) - Get It Scored Using AutoSAS -- An Automated System for Scoring Short
Answers [63.835172924290326]
SAS(Automatic Short Answer Scoring)への高速でスケーラブルで正確なアプローチを提示します。
SASのためのシステム、すなわちAutoSASの設計と開発を提案し、説明します。
AutoSASは最先端のパフォーマンスを示し、いくつかの質問のプロンプトで8%以上良い結果が得られる。
論文 参考訳(メタデータ) (2020-12-21T10:47:30Z) - Scaling Systematic Literature Reviews with Machine Learning Pipelines [57.82662094602138]
体系的なレビューは、科学的文書からデータを抽出する。
これらの側面をそれぞれ自動化するパイプラインを構築し、多くの人間時間対システム品質トレードオフを実験します。
人間の専門的アノテーションの2週間だけで、パイプラインシステム全体の驚くほどの精度と一般性が得られることが分かりました。
論文 参考訳(メタデータ) (2020-10-09T16:19:42Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。