論文の概要: Stable and Faithful Explanations for Knowledge Tracing
- arxiv url: http://arxiv.org/abs/2609.28502v1
- Date: Tue, 15 Sep 2026 00:40:09 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-09-25 21:10:09.369527
- Title: Stable and Faithful Explanations for Knowledge Tracing
- Title(参考訳): 知識追跡のための安定的で忠実な説明
- Abstract要約: 本研究では,予測競合性(RQ1),説明安定度(RQ2),再学習ベース忠実度(RQ3)の検証プロトコルを提案する。
ASSISTments 2009と2012の5つの教育テーマにまたがる13の行動特徴が組み込まれている。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Knowledge tracing (KT) models predict student performance opaquely, limiting pedagogical action. This study contributes a validation protocol testing predictive competitiveness (RQ1), explanation stability (RQ2) and retraining-based faithfulness (RQ3) together. Thirteen behavioral features across five pedagogical themes were engineered from ASSISTments 2009 and 2012, with history features computed from temporally preceding interactions and current response latency retained only for retrospective analysis. ASSISTments 2009 was rebuilt: the uncorrected skill-builder release duplicates each multi-skill interaction across one row per skill, and because those rows share one correctness label, they leak it into preceding-interaction features. Rebuilding lowered model AUC and reordered the explanation results. An Extreme Gradient Boosting (XGBoost) model explained with Tree SHapley Additive exPlanations (TreeSHAP) was compared against four deep baselines (DKT, SAKT, AKT and SimpleKT) under an information-matched protocol giving the deep models the same behavioral signals and restricting XGBoost to what is derivable from the identifier-and-correctness stream they consume. XGBoost reached an area under the curve (AUC) of 0.777 on 2012 and 0.786 on rebuilt 2009, with prediction-time AUCs of 0.771 and 0.775, respectively, after excluding current response latency; restricted to the baselines' information it performed as they did (0.697 against 0.700, and 0.717 against 0.720), locating the difference in information supplied, not model family. Rankings were consistent across folds, seeds and conditioning schemes (Spearman rho = 0.989-1.000), and removing top-ranked TreeSHAP features harmed AUC more than random removal, though split-gain and permutation rankings performed comparably. Student-level examples are illustrative interpretations, not validated recommendations.
- Abstract(参考訳): 知識追跡(KT)モデルは、学生のパフォーマンスを不透明に予測し、教育行為を制限する。
本研究では,予測競合性(RQ1),説明安定度(RQ2),再学習ベース忠実度(RQ3)の検証プロトコルを提案する。
ASSISTments 2009 と 2012 の5つのテーマにまたがる 13 つの行動的特徴は,時間的に先行するインタラクションから履歴的特徴を計算し,現在の応答遅延は振り返り解析のみに保たれている。
ASSISTments 2009は再構築され、未修正のスキルビルダーリリースは、スキルごとに1行ずつのマルチスキルインタラクションを複製する。
モデルAUCをリビルドし、説明結果を並べ替えた。
The Extreme Gradient Boosting (XGBoost) model explained with Tree SHapley Additive exPlanations (TreeSHAP) were compared on four deep baselines (DKT, SAKT, AKT, SimpleKT) under a information-matched protocol that the deep model that the same behavioral signals and restricting XGBoost to be derivable from the ID-and-correctness stream。
XGBoostは2012年の0.777(AUC)、2009年の0.786(AUC)、2009年の0.771(AUC)、2009年の0.775(AUC)、それぞれ現在の応答遅延を除外し、ベースラインの情報(0.697、0.700、0.717、0.720)に制限した。
スピアマンrho = 0.989-1.000)、およびトップランクのTreeSHAP特徴を取り除いたことでAUCは無作為な除去以上の損傷を受けたが、スプリット・ゲインとパーミューテーション・ランキングは同等に実行された。
学生レベルの例は、実証されたレコメンデーションではなく、説明的な解釈である。
関連論文リスト
- DRSR: Learning Set-Level Deletion Risk for Efficient Long-Horizon Agents [55.84813053778976]
ロングホライゾン言語モデルエージェントは、現在の決定と関係が変化する推論の痕跡、ツール交換、観察を蓄積する。
直接セットリスクスコアは、削除セットの選択としてエージェント履歴圧縮リスクを定式化する。
メカニカル・アナリシスとアブリケーションは、決定に制約のある関係、保持されたコンテキスト情報、ペア・インタラクション、および棄権がそれぞれ信頼できるプルーニングに寄与していることを示している。
論文 参考訳(メタデータ) (2026-09-23T03:06:01Z) - ReDraft, Don't Just Distill: Reference-Driven Revision for Continual VLLM Post-Training [66.72708893922605]
大規模なマルチモーダルモデルのポストトレーニングは、事前トレーニングから保護しながら、新しい機能を追加する必要がある。
SFTは、タスクをほぼゼロの精度から学習する明確なターゲット監視を提供するが、そのオフポリティックターゲットはモデルを十分に移動させ、忘れる原因となる。
モデル自身の失敗から両方を得るReDraftを紹介します。
論文 参考訳(メタデータ) (2026-09-15T04:59:03Z) - NeoHorse-1: Towards Recursive Self-Improvement via Agentic Post-Training with Routing Harness [76.6324710887112]
NeoHorse-1は、エージェントのポストトレーニングを通じてこの経路を探索するために開発されたエージェントネイティブモデルのファミリーである。
本システムでは,異種モデルプールとインテリジェントなルーティング,予測能力要求,選択されたサービス層,およびその後のユーザ毎のインタラクションを結合する。
論文 参考訳(メタデータ) (2026-09-08T03:14:54Z) - Leakage-Robust Evaluation and Data-Scale Sensitivity of Attention-Enhanced Multi-Task Learning for Joint Fault Diagnosis and Remaining Useful Life Estimation [0.0]
マルチタスクディープラーニングモデルは、スライディングウィンドウシーケンスがトレーニングとテストセットにどのように分割されるかによって影響を受ける可能性がある。
ナイーブな分割は、真の20-60%から99.9%に分類精度を低下させる可能性がある。
チャンクベース・リーク監査分割プロトコルを導入し,5種の種子,片方向ANOVA,Tukey HSDテストを用いて全モデルを評価した。
論文 参考訳(メタデータ) (2026-07-17T20:33:36Z) - Beyond Gradient-Based Attacks: Adversarial Robustness and Explainability Stability in Cybersecurity Classifiers [0.0]
サイバーセキュリティ分類器に対する敵対的な攻撃は、予測の低下と説明の不安定化という2つの脅威を引き起こす。
非微分可能木モデルに適用可能な3つのブラックボックス手法を含む5つの攻撃を評価する。
2軸のフレームワークは、観測された攻撃ランクを説明し、ツリーアンサンブル評価のための実践的なガイダンスを与える。
論文 参考訳(メタデータ) (2026-07-02T04:10:58Z) - Deterministic Decisions for High-Stakes AI. A Zero-Egress Pipeline with the Deployability of RAG and the Accuracy of Machine Learning [0.0]
インターベンションバイアス(英語: Intervention bias)は、大規模言語モデル教育アドバイザリーエージェントの以前には確立されていなかった障害モードである。
教師付き政策学習は、このバイアスを排除していることを示す。
LLM-as-judge score is blind to intervention bias, rewarding fluent over-prescription rather than decision quality。
論文 参考訳(メタデータ) (2026-06-28T08:58:17Z) - Let the Results Speak: A Replication-First Paradigm for LLM Behavioral Benchmarking [22.825786049667602]
本稿では,1つのヒト・ラタのコンセンサスに有効性を確保するために,複製第一パラダイムを提案する。
楽器を4つの特性で認証する - Kランの信頼性、アーキテクチャ的に異なる審査員間のクロスインストラクトレプリケーション、以前のトレーニングコホートからの審査員による歴史的フットプリントキャリブレーション、事前登録された予測。
本研究は, 自己発達型データ駆動による情緒的伴奏で, 次元は事前に決められず, 手順は9次元に安定化する。
論文 参考訳(メタデータ) (2026-05-27T03:41:11Z) - CARE What Fails: Contrastive Anchored-REflection for Verifiable Multimodal [84.71254539482369]
検証可能な報酬を伴うグループ相対的強化学習(RLVR)は、しばしば、すでに失敗している最も情報に富むデータを浪費する。
エラーを監督するマルチモーダル推論のための,障害中心のポストトレーニングフレームワークであるCAREを提案する。
CAREは正確さを改善し、スムーズさをトレーニングすると同時に、障害からの学習信号のシェアを明示的に増やします。
論文 参考訳(メタデータ) (2025-12-22T16:34:21Z) - REBAR: Retrieval-Based Reconstruction for Time-series Contrastive Learning [64.08293076551601]
正の対を識別する学習尺度を新たに提案する。
検索ベースレコンストラクションは2つのシーケンス間の類似度を測定する。
本稿では,REBAR誤差が相互クラスメンバシップの予測因子であることを示す。
論文 参考訳(メタデータ) (2023-11-01T13:44:45Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。