論文の概要: Exploring Effective Strategies for Building a Customised GPT Agent for Coding Classroom Dialogues
- arxiv url: http://arxiv.org/abs/2506.07194v1
- Date: Sun, 08 Jun 2025 15:29:05 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-06-10 21:10:47.086786
- Title: Exploring Effective Strategies for Building a Customised GPT Agent for Coding Classroom Dialogues
- Title(参考訳): コーディングクラスルーム対話のためのカスタマイズGPTエージェント構築のための効果的な方策を探る
- Authors: Luwei Bai, Dongkeun Han, Sara Hennessy,
- Abstract要約: 本研究は,教室対話をコードするカスタマイズGPTエージェントの開発に有効な戦略について検討する。
GPT-4のMyGPTエージェントを事例として,人間のコードブックを用いた教室対話におけるベースライン性能を評価する。
この結果は,いくつかの制限があるにも関わらず,これらの戦略で開発されたMyGPTエージェントが有用なコーディングアシスタントとして機能することを示唆している。
- 参考スコア(独自算出の注目度): 0.0
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: This study investigates effective strategies for developing a customised GPT agent to code classroom dialogue. While classroom dialogue is widely recognised as a crucial element of education, its analysis remains challenging due to the need for a nuanced understanding of dialogic functions and the labour-intensive nature of manual transcript coding. Recent advancements in large language models offer promising avenues for automating this process. However, existing studies predominantly focus on training large-scale models or evaluating pre-trained models with fixed codebooks, which are often not applicable or replicable for dialogue researchers working with small datasets or customised coding schemes. Using GPT-4's MyGPT agent as a case, this study evaluates its baseline performance in coding classroom dialogue with a human codebook and examines how performance varies with different example inputs through a variable control method. Through a design-based research approach, it identifies a set of practical strategies, based on MyGPT's unique features, for configuring effective agents with limited data. The findings suggest that, despite some limitations, a MyGPT agent developed with these strategies can serve as a useful coding assistant by generating coding suggestions.
- Abstract(参考訳): 本研究は,教室対話をコードするカスタマイズGPTエージェントを開発するための効果的な戦略について検討する。
教室の対話は教育の重要な要素として広く認識されているが、その分析は、対話機能に関する微妙な理解と手書き文字起こし符号化の労働集約性の必要性から、依然として困難である。
大規模言語モデルの最近の進歩は、このプロセスを自動化するための有望な道を提供する。
しかし、既存の研究は主に大規模モデルのトレーニングや、固定されたコードブックによる事前学習モデルの評価に重点を置いている。
本研究は, GPT-4のMyGPTエージェントを事例として, 人間のコードブックを用いたプログラミング教室での対話におけるベースライン性能を評価し, 可変制御手法を用いて, 異なるサンプル入力でパフォーマンスがどう変化するかを検討する。
デザインベースの研究アプローチを通じて、限られたデータで効果的なエージェントを設定するための、MyGPTのユニークな特徴に基づく一連の実践的戦略を特定する。
この結果は,いくつかの制限があるにも関わらず,これらの戦略で開発されたMyGPTエージェントが,符号化提案を生成することで,有用なコーディングアシスタントとして機能することを示唆している。
関連論文リスト
- Enhancing LLM Code Generation: A Systematic Evaluation of Multi-Agent Collaboration and Runtime Debugging for Improved Accuracy, Reliability, and Latency [0.0]
プログラミング活動の異なる構成や訓練パラダイムがコード生成の効率に与える影響について検討する。
私たちの発見は、堅牢なAI駆動型コーディングソリューションを求める組織に貴重な洞察を与えます。
論文 参考訳(メタデータ) (2025-05-04T14:44:27Z) - Decoding Decoded: Understanding Hyperparameter Effects in Open-Ended Text Generation [0.22499166814992438]
生成型大規模言語モデル(LLM)の復号戦略は、テキスト生成タスクにおいて、重要ではあるがしばしば未発見の側面である。
本研究では,復号化手法,オープンソースLCM,テキストドメイン,評価プロトコルの大規模評価を行う。
我々の実験には、事実的(ニュースなど)と創造的(フィクションなど)の両方が含まれており、人間の判断とともに、幅広い自動評価指標が組み込まれている。
論文 参考訳(メタデータ) (2024-10-08T14:51:03Z) - ChatSOP: An SOP-Guided MCTS Planning Framework for Controllable LLM Dialogue Agents [52.7201882529976]
対話エージェントの制御性を高めるため,SOP誘導モンテカルロ木探索(MCTS)計画フレームワークを提案する。
これを実現するために、GPT-4oを用いた半自動ロールプレイシステムを用いて、SOPアノテーション付きマルチシナリオ対話からなるデータセットをキュレートする。
また、SOP予測のための教師付き微調整と思考の連鎖推論を統合する新しい手法を提案する。
論文 参考訳(メタデータ) (2024-07-04T12:23:02Z) - A Thorough Examination of Decoding Methods in the Era of LLMs [72.65956436513241]
復号法は、次世代の予測器から実用的なタスク解決器に言語モデルを変換する上で、必須の役割を果たす。
本稿では,大規模言語モデルの文脈における様々な復号法を包括的かつ多面的に分析する。
その結果,復号法の性能は特にタスク依存的であり,アライメント,モデルサイズ,量子化などの要因に影響されていることが明らかとなった。
論文 参考訳(メタデータ) (2024-02-10T11:14:53Z) - JoTR: A Joint Transformer and Reinforcement Learning Framework for
Dialog Policy Learning [53.83063435640911]
対話政策学習(DPL)は対話モデリングの重要な構成要素である。
フレキシブルな対話行動を生成するための新しいフレームワークであるJoTRを導入する。
従来の方法とは異なり、JoTRはよりダイナミックで適応可能な対話アクション生成を可能にするワードレベルのポリシーを定式化している。
論文 参考訳(メタデータ) (2023-09-01T03:19:53Z) - Improving Meta-learning for Low-resource Text Classification and
Generation via Memory Imitation [87.98063273826702]
本稿では,メモリ模倣メタラーニング(MemIML)手法を提案する。
本手法の有効性を証明するために理論的解析を行った。
論文 参考訳(メタデータ) (2022-03-22T12:41:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。