論文の概要: Comparing the Impact of Pedagogy-Informed Custom and General-Purpose GAI Chatbots on Students' Science Problem-Solving Processes and Performance Using Heterogeneous Interaction Network Analysis
- arxiv url: http://arxiv.org/abs/2604.03022v1
- Date: Fri, 03 Apr 2026 13:13:28 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-06 17:20:24.477026
- Title: Comparing the Impact of Pedagogy-Informed Custom and General-Purpose GAI Chatbots on Students' Science Problem-Solving Processes and Performance Using Heterogeneous Interaction Network Analysis
- Title(参考訳): 教育インフォームドカスタムと汎用GAIチャットボットが学生の理科課題解決プロセスとパフォーマンスに及ぼす影響 : 異種インタラクションネットワーク分析による検討
- Authors: Hanyu Su, Huilin Zhang, Shihui Feng,
- Abstract要約: 本研究は,48人の中学生がカスタムチャットボットと汎用チャットボットを併用した,イントラオブジェクトの対バランス設計を採用した。
3297 異種相互作用ネットワーク分析(HINA)による学生-チャットボット対話の収集と分析
- 参考スコア(独自算出の注目度): 0.03540145348020375
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Problem solving plays an essential role in science education, and generative AI (GAI) chatbots have emerged as a promising tool for supporting students' science problem solving. However, general-purpose chatbots (e.g., ChatGPT), which often provide direct, ready-made answers, may lead to students' cognitive offloading. Prior research has rarely focused on custom chatbots for facilitating students' science problem solving, nor has it examined how they differently influence problem-solving processes and performance compared to general-purpose chatbots. To address this gap, we developed a pedagogy-informed custom GAI chatbot grounded in the Socratic questioning method, which supports students by prompting them with guiding questions. This study employed a within-subjects counterbalanced design in which 48 secondary school students used both custom and general-purpose chatbot to complete two science problem-solving tasks. 3297 student-chatbot dialogues were collected and analyzed using Heterogeneous Interaction Network Analysis (HINA). The results showed that: (1) students demonstrated significantly higher interaction intensity and cognitive interaction diversity when using custom chatbot than using general-purpose chatbot; (2) students were more likely to follow custom chatbot's guidance to think and reflect, whereas they tended to request general-purpose chatbot to execute specific commands; and (3) no statistically significant difference was observed in students' problem-solving performance evaluated by solution quality between two chatbot conditions. This study provides novel theoretical insights and empirical evidence that custom chatbots are less likely to induce cognitive offloading and instead foster greater cognitive engagement compared to general-purpose chatbots. This study also offers insights into the design and integration of GAI chatbots in science education.
- Abstract(参考訳): 問題解決は科学教育において重要な役割を担い、学生の科学問題解決を支援するための有望なツールとして生成型AI(GAI)チャットボットが登場した。
しかし、直接的で準備の整った回答を提供する汎用チャットボット(例えばChatGPT)は、生徒の認知的オフロードにつながる可能性がある。
従来の研究では、生徒の科学的な問題解決を促進するためのカスタムチャットボットにはほとんど焦点を合わせておらず、汎用チャットボットと比較して、問題解決プロセスとパフォーマンスにどのように異なる影響を与えるかも検討されていない。
このギャップに対処するために,ソクラテス質問法を基盤とした教育インフォームドのカスタムGAIチャットボットを開発した。
本研究は,48人の中学生がカスタムチャットボットと汎用チャットボットを併用して2つの科学問題解決タスクを完了した,イントラオブジェクト対バランス設計を採用した。
3297人の学生とチャットボットの対話を、異種相互作用ネットワーク分析(HINA)を用いて収集・分析した。
その結果,(1)チャットボットを用いた場合の相互作用強度と認知的相互作用の多様性は,汎用チャットボットよりも有意に高く,(2)チャットボットの思考・反射指導に追従する傾向があり,(3)汎用チャットボットに特定のコマンドを指示する傾向があり,(3)2つのチャットボット条件間の解品質による解品質評価では統計的に有意な差は認められなかった。
この研究は、カスタムチャットボットが認知的オフロードを誘発しにくく、代わりに汎用チャットボットよりも認知的エンゲージメントを高めるという、新しい理論的洞察と実証的な証拠を提供する。
本研究は,理科教育におけるGAIチャットボットの設計と統合に関する知見も提供する。
関連論文リスト
- Exploring Teacher-Chatbot Interaction and Affect in Block-Based Programming [5.281501249826119]
AIベースのチャットボットは、学習と教育を加速する可能性があるが、思慮深い設計と足場を使わずに、反生産的な結果をもたらす可能性がある。
ブロック型プログラミング環境における理科・計算思考活動にチャットボットを用いた中学生11チームを対象に実験を行った。
その結果,教師は,学習能力の低下や批判的思考の潜在的な低下などとともに,スキルの育成や自己自信の確立といったチャットボットのメリットを認識した。
論文 参考訳(メタデータ) (2026-03-02T15:42:27Z) - Using the SOCIO Chatbot for UML Modelling: A Family of Experiments [0.1957338076370071]
私たちは、協調モデリング(SOCIO)におけるSOCIOのユーザビリティと、学術的な環境でのオンラインWebツール(Creately)を比較します。
学生たちは、オンラインコラボレーションツールよりも、SOCIOを使ってクラスダイアグラムを構築するのが得意でした。
私たちの研究は、この分野における実験の今後の方向性を明らかにするのに役立ちました。
論文 参考訳(メタデータ) (2024-08-26T08:12:11Z) - Analyzing Large language models chatbots: An experimental approach using a probability test [0.0]
本研究は2つの異なる大言語モデル(LLM)を用いた探索実験を通じて行われた定性的な経験的研究から成る。
方法としては,確率問題で設計されたプロンプトに基づいて探索試験を行った。
認知心理学において広く認知されている「リンダ問題」は、この実験に特化して新たな問題である「マリー問題」の開発とともに、テスト作成の基礎として用いられた。
論文 参考訳(メタデータ) (2024-07-10T15:49:40Z) - Developing generative AI chatbots conceptual framework for higher education [0.0]
本研究は, 高等教育におけるAI生成物の影響を解明し, 効果的に実施するための重要な要素を明らかにすることを目的とする。
結果は、AIチャットボットが学生のエンゲージメントを改善し、教育プロセスを合理化し、管理と研究の業務をサポートするためにどれだけのことができるかを実証する。
しかし、不愉快な学生の感情、AIが生み出す素材の正確性への疑念、新しい技術への不安と神経質さなど、明らかな困難もある。
論文 参考訳(メタデータ) (2024-03-28T10:40:26Z) - Developing Effective Educational Chatbots with ChatGPT prompts: Insights
from Preliminary Tests in a Case Study on Social Media Literacy (with
appendix) [43.55994393060723]
ChatGPTのようなゼロショット学習機能を持つ言語学習モデルの最近の進歩は、教育チャットボットを開発する新たな可能性を示している。
本稿では,混合ターンチャットボットのインタラクションを可能にするシンプルなシステムを用いたケーススタディを提案する。
本稿では,ChatGPTが複数の相互接続型学習目標を追求し,文化,年齢,教育レベルなどのユーザ特性に教育活動を適応させ,多様な教育戦略や会話スタイルを活用できる能力について検討する。
論文 参考訳(メタデータ) (2023-06-18T22:23:18Z) - Implementing a Chatbot Solution for Learning Management System [0.0]
今日チャットボットが直面する最大の問題は、人間の言語を模倣することだ。
エクストリームプログラミング手法はChatterBot、Pyside2、Webスクレイピング、TampermonkeyをBlackboardに統合するために選択された。
我々は、AIボットを教育環境に統合する可能性を示した。
論文 参考訳(メタデータ) (2022-06-27T11:04:42Z) - CheerBots: Chatbots toward Empathy and Emotionusing Reinforcement
Learning [60.348822346249854]
本研究では,複数の共感型チャットボットがユーザの暗黙の感情を理解し,複数の対話のターンに対して共感的に応答する枠組みを提案する。
チャットボットをCheerBotsと呼びます。CheerBotsは検索ベースまたは生成ベースで、深い強化学習によって微調整されます。
共感的態度で反応するため,CheerBotsの学習支援としてシミュレーションエージェントである概念人間モデルを開発し,今後のユーザの感情状態の変化を考慮し,共感を喚起する。
論文 参考訳(メタデータ) (2021-10-08T07:44:47Z) - Put Chatbot into Its Interlocutor's Shoes: New Framework to Learn
Chatbot Responding with Intention [55.77218465471519]
本稿では,チャットボットに人間のような意図を持つための革新的なフレームワークを提案する。
我々のフレームワークには、ガイドロボットと人間の役割を担うインターロケータモデルが含まれていた。
本フレームワークを3つの実験的なセットアップを用いて検討し,4つの異なる指標を用いた誘導ロボットの評価を行い,柔軟性と性能の利点を実証した。
論文 参考訳(メタデータ) (2021-03-30T15:24:37Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。