論文の概要: From Efficiency to Sufficiency: The Cost-Aware Measurement Design Framework for Automated Essay Scoring

• arxiv url: http://arxiv.org/abs/2610.19287v1
• Date: Tue, 13 Oct 2026 23:05:19 GMT
• ステータス: 翻訳完了
• システム内更新日: 2026-10-15 21:06:15.841287
• Title: From Efficiency to Sufficiency: The Cost-Aware Measurement Design Framework for Automated Essay Scoring
• Title（参考訳）: 効率性から十分性:自動評価のための費用対効果測定設計フレームワーク
• Abstract要約: 本稿では,コスト制約測定システムとして自動エッセイスコア(AES)を再構成する。 本論文は、CPDS(Pepper Defensible score)のコストを定義し、AESシステムは品質コストで比較されるべきである、と論じている。
• 参考スコア（独自算出の注目度）: 1.2333280983346018
• License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
• Abstract: Compute cost in automated essay scoring (AES) is usually treated as a technical efficiency issue rather than a measurement design concern. Yet deployment decisions require more than reporting latency, model size, or inference expense. In high-stakes settings, total burden includes validation, monitoring, adjudication, compliance, and governance; in instructional settings, pricing, licensing, and integration may dominate cost. This paper reframes AES as a cost-constrained measurement system and introduces the Cost-Aware Measurement Design (CAMD) Framework, a four-layer structure consisting of metering, allocation, unit economics, and decision, for translating computational and workflow resource records into decision-relevant cost constructs. Direct cost is specified as monetary outlay plus attributable labor and time, and two criteria, design attribution and auditability, determine what the cost boundary excludes. Burdens that satisfy neither criterion, such as institutional capability and governance posture, are represented as constraints on which designs are admissible rather than priced. The paper defines cost per defensible score (CPDS) and argues that AES systems should be compared by quality-cost sufficiency: minimizing cost among defensible scoring designs that satisfy measurement requirements. Scoring volume conditions all four layers, so cost per defensible score is treated as a function of scale rather than as a single transferable number. CAMD provides a portable basis for representing, comparing, and evaluating cost across AES studies and deployment contexts.
• Abstract（参考訳）: 自動エッセイスコア(AES)の計算コストは通常、測定設計の問題ではなく、技術的効率の問題として扱われる。 しかし、デプロイメントの決定には、レイテンシやモデルサイズ、推論コストの報告以上のものが必要です。 高度な設定では、バリデーション、監視、判断、コンプライアンス、ガバナンスが含まれ、命令設定、価格設定、ライセンス、統合がコストを支配します。 本稿では,AES をコスト制約測定システムとして再編成し,コスト・アウェア計測設計 (CAMD) フレームワークを導入する。 直接のコストは、金銭的なアウトレイと帰属的な労働と時間として規定され、設計の帰属と監査可能性という2つの基準によって、コスト境界が除外されるものを決定する。 制度能力や統治姿勢などの基準を満たさないバーデンは、価格よりも設計が許容できるという制約として表現される。 本論文は、CPDS(Definensible score)のコストを定義し、AESシステムは品質コストで比較されるべきである、と論じている。 音量条件を4層すべてに当てはめるため、固定可能なスコア当たりのコストは1つの転送可能な数ではなく、スケールの関数として扱われる。 CAMDは、AES研究とデプロイメントコンテキストにおけるコストを表現、比較、評価するためのポータブルな基盤を提供する。

関連論文リスト

• Pandora's AI Model Routing Box: Efficient Allocation with Costly Value Estimation [64.51088225051959]
  不均一なAIシステムは、最低コストで最も効果的に答えられる専門家にクエリをルーティングすることで、品質と効率を向上させることができる。 我々はこのトレードオフをPandoraのBoxの例として定式化した。 ガウス信号モデルの下では、得られたポリシーは、各専門家とインプットに対して、その価値見積の精算がそのコストに値するかどうかを決定する、クローズドフォームな情報表現を持つ。
  論文  参考訳（メタデータ） (2026-08-20T17:54:37Z)
• ACEM: A Cost Estimation Model for Agentic Software Engineering [0.0]
  本稿では,エージェント開発総コストを3つの付加次元に分解するACEM(Agentic Cost Estimation Model)を提案する。 ACEMはエージェントダイナミクスのための3つの構成要素を紹介している。Revision Factor (RF)、出力の拒絶と再試行からトークンのオーバーヘッドをモデル化するContext Factor (CF)、コンテキストの蓄積に伴ってトークンの消費が上昇するのをキャプチャする HITL Intensity Score (HIS)、そして4段階の監視分類スキームであるHITL Intensity Score (HIS)である。 アーリーステージの提案として、研究コミュニティに実際のプロジェクトデータを通じてモデルを調整、テスト、拡張するよう呼びかけている。
  論文  参考訳（メタデータ） (2026-08-03T17:54:11Z)
• When Should Active RAG Retrieve? A Budget-Aware Evaluation of Utility, Calibration, and Cost [11.216720435946804]
  予算を意識したアクティブRAG評価は、フロンティア、実現された使用法、しきい値転送エラー、ハーモレート、コスト分解を精度とともに報告すべきである。 トリガースコアが有用な検索判断をランク付けするかどうか、過去のデータで調整されたしきい値が将来の予算を満たすかどうか、トリガーサイドがどのようにデプロイメントコストを変更するか、という3つの質問を運用します。
  論文  参考訳（メタデータ） (2026-07-27T05:17:06Z)
• Cost-Aware Learning [72.31444819326795]
  本稿では,異なるコンポーネント関数をサンプリングするコスト認識学習の問題点について考察する。 凸関数に対するコスト・アウェア・Descentアルゴリズムを提案し、そのコスト複雑性を導出し誤差を$$$とする。 本稿では,性能を保ちつつポリシー最適化のコストを削減するアルゴリズムであるCost-Aware GRPOを紹介する。
  論文  参考訳（メタデータ） (2026-04-30T15:39:09Z)
• Reliable LLM-Based Edge-Cloud-Expert Cascades for Telecom Knowledge Systems [54.916243942641444]
  大規模言語モデル(LLM)は、通信などの分野において、自動化の鍵となる存在として浮上している。 本研究では,問合せパイプラインによる意思決定を支援する,エッジクラウドに精通したLLMベースの知識システムについて検討する。
  論文  参考訳（メタデータ） (2025-12-23T03:10:09Z)
• Cost-aware Stopping for Bayesian Optimization [46.95172329282389]
  本稿では,様々な評価コストに適応し,チューニングが不要なベイズ最適化のためのコスト対応停止則を提案する。 我々は,最先端の取得関数と組み合わせた場合,停止規則によって得られる期待累積評価コストを拘束する理論的な保証を証明した。
  論文  参考訳（メタデータ） (2025-07-16T17:54:14Z)
• Cost-Optimal Active AI Model Evaluation [71.2069549142394]
  生成AIシステムの開発には、継続的な評価、データ取得、アノテーションが必要である。 我々は、安価だがしばしば不正確で弱いレーダの使用を積極的にバランスさせる新しいコスト認識手法を開発した。 我々は、弱者と強者の間で所定のアノテーション予算を割り当てるためのコスト最適化政策のファミリーを導出する。
  論文  参考訳（メタデータ） (2025-06-09T17:14:41Z)
• An Identifiable Cost-Aware Causal Decision-Making Framework Using Counterfactual Reasoning [18.324601057882386]
  そこで本研究では,最小コスト因果決定(MiCCD)フレームワークを提案する。 混合異常データの存在を識別する反ファクト的推論プロセスに重点を置いている。 MiCCDは、F1スコア、コスト効率、ランキング品質(nDCG@k値)など、従来の手法よりも優れています。
  論文  参考訳（メタデータ） (2025-05-13T08:41:45Z)
• Cost-of-Pass: An Economic Framework for Evaluating Language Models [25.152801302217693]
  正しい解決策を生み出すための金銭的コストである「パスコスト」を導入します。 次に、「最前線のコスト」を、利用可能なモデルや「人間専門家」にまたがる最小のパスコストとして定義する。 私たちは、基本的な量的、知識集約的、複雑な量的タスクにおいてフロンティアを推し進めるために、軽量、大規模、推論モデルにおける革新が不可欠であることが分かりました。
  論文  参考訳（メタデータ） (2025-04-17T21:58:29Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。