論文の概要: AI Literacy Assessment Revisited: A Task-Oriented Approach Aligned with Real-world Occupations
- arxiv url: http://arxiv.org/abs/2511.05475v1
- Date: Fri, 07 Nov 2025 18:38:15 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-11-10 21:00:44.861622
- Title: AI Literacy Assessment Revisited: A Task-Oriented Approach Aligned with Real-world Occupations
- Title(参考訳): AIリテラシーの評価を再考する - 現実の作業に配慮したタスク指向アプローチ
- Authors: Christopher Bogart, Aparna Warrier, Arav Agarwal, Ross Higashi, Yufan Zhang, Jesse Flot, Jaromir Savelka, Heather Burte, Majd Sakr,
- Abstract要約: 本稿では,アメリカ海軍のロボティクス訓練プログラムの文脈において,新しいAIリテラシー評価器の開発と,それに伴う形式的アセスメントについて述べる。
我々は、AI関連の仕事のために人々を訓練するとき、教育者は、高度に文脈化された実践的スキルを強調する楽器でそれらを評価することを検討するべきであると論じる。
- 参考スコア(独自算出の注目度): 1.7684337194725703
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: As artificial intelligence (AI) systems become ubiquitous in professional contexts, there is an urgent need to equip workers, often with backgrounds outside of STEM, with the skills to use these tools effectively as well as responsibly, that is, to be AI literate. However, prevailing definitions and therefore assessments of AI literacy often emphasize foundational technical knowledge, such as programming, mathematics, and statistics, over practical knowledge such as interpreting model outputs, selecting tools, or identifying ethical concerns. This leaves a noticeable gap in assessing someone's AI literacy for real-world job use. We propose a work-task-oriented assessment model for AI literacy which is grounded in the competencies required for effective use of AI tools in professional settings. We describe the development of a novel AI literacy assessment instrument, and accompanying formative assessments, in the context of a US Navy robotics training program. The program included training in robotics and AI literacy, as well as a competition with practical tasks and a multiple choice scenario task meant to simulate use of AI in a job setting. We found that, as a measure of applied AI literacy, the competition's scenario task outperformed the tests we adopted from past research or developed ourselves. We argue that when training people for AI-related work, educators should consider evaluating them with instruments that emphasize highly contextualized practical skills rather than abstract technical knowledge, especially when preparing workers without technical backgrounds for AI-integrated roles.
- Abstract(参考訳): 人工知能(AI)システムがプロフェッショナルな文脈でユビキタスになるにつれて、労働者に、しばしばSTEM以外のバックグラウンドを装備させる必要がある。
しかし、一般的な定義やAIリテラシーの評価は、しばしば、モデル出力の解釈、ツールの選択、倫理的関心事の特定といった実践的な知識よりも、プログラミング、数学、統計といった基礎的な技術的知識を強調する。
これは、現実世界のジョブ使用に対して、誰かのAIリテラシーを評価する上で、顕著なギャップを残します。
本稿では,AIツールをプロの環境で効果的に活用する能力に基礎を置く,AIリテラシーのためのワークタスク指向アセスメントモデルを提案する。
本稿では,アメリカ海軍のロボティクス訓練プログラムの文脈において,新しいAIリテラシー評価器の開発と,それに伴う形式的アセスメントについて述べる。
このプログラムには、ロボティクスとAIリテラシーのトレーニングに加えて、実践的なタスクとの競合や、仕事環境でAIの使用をシミュレートするための複数の選択シナリオタスクが含まれていた。
応用AIリテラシーの尺度として、競争のシナリオタスクは、私たちが過去の研究から採用したテスト、あるいは自分たちで開発したテストよりも優れていたことが分かりました。
我々は、AI関連の仕事のために人々を訓練するとき、教育者は、抽象的な技術知識よりも、高度に文脈化された実践的スキルを強調する楽器でそれらを評価すべきである、と論じている。
関連論文リスト
- Look: AI at Work! - Analysing Key Aspects of AI-support at the Work Place [39.146761527401424]
私たちは、アプリケーションが関心を持っているAIの分野に注目します。
これには、学習ベースのシステムのトレーニングにおける高品質なデータの重要性が含まれる。
心理学的要因の観点から、我々は、AI支援作業システムの開発について調査する研究質問を導出する。
論文 参考訳(メタデータ) (2025-09-02T12:51:23Z) - Generative AI Literacy: Twelve Defining Competencies [48.90506360377104]
本稿では、生成AIと対話するために必要なスキルと知識領域を網羅した、生成人工知能(AI)リテラシーの能力に基づくモデルを提案する。
能力は、基礎的なAIリテラシーから、倫理的および法的考慮を含むエンジニアリングとプログラミングのスキルの促進まで様々である。
これらの12の能力は、個人、政策立案者、政府高官、教育者が責任を持って生成AIの可能性をナビゲートし活用しようとするための枠組みを提供する。
論文 参考訳(メタデータ) (2024-11-29T14:55:15Z) - Imagining and building wise machines: The centrality of AI metacognition [78.76893632793497]
我々は人間の知恵について知られているものを調べ、そのAIのビジョンをスケッチする。
AIシステムは特にメタ認知に苦しむ。
スマートAIのベンチマーク、トレーニング、実装について論じる。
論文 参考訳(メタデータ) (2024-11-04T18:10:10Z) - AI Literacy for All: Adjustable Interdisciplinary Socio-technical Curriculum [0.8879149917735942]
本稿では,AIの学際的理解を促進するカリキュラム「AI Literacy for All」を提案する。
本稿では、AIリテラシーの4つの柱として、AIのスコープと技術的側面を理解すること、知識と責任のある方法でGen-AIと対話する方法を学ぶこと、倫理と責任のあるAIの社会技術的問題、そしてAIの社会的および将来の意味について述べる。
論文 参考訳(メタデータ) (2024-09-02T13:13:53Z) - Towards the Terminator Economy: Assessing Job Exposure to AI through LLMs [10.844598404826355]
米国の雇用の3分の1はAIに強く依存しており、主に大学院または大学院の教育を必要とする高度な職業で行われている。
高度な職業であっても、AIはタスク置換において高い多様性を示し、AIと人間は同じ職業の中で相互に補完することを示唆している。
すべての結果、モデル、コードはオンラインで公開されており、コミュニティが結果を再現し、結果を比較し、私たちの仕事をベンチマークとして使用して、時間とともにAIの進捗を監視します。
論文 参考訳(メタデータ) (2024-07-27T08:14:18Z) - MAILS -- Meta AI Literacy Scale: Development and Testing of an AI
Literacy Questionnaire Based on Well-Founded Competency Models and
Psychological Change- and Meta-Competencies [6.368014180870025]
アンケートはモジュラー(すなわち、互いに独立して使用できる異なるファセットを含む)であり、プロフェッショナルな生活に柔軟に適用できるべきである。
我々は、AIリテラシーの異なる側面を表すために、Ngと同僚がAIリテラシーを概念化した60項目を作成した。
AIに関する問題解決、学習、感情制御などの心理的能力を表す12項目が追加されている。
論文 参考訳(メタデータ) (2023-02-18T12:35:55Z) - Automated Machine Learning: A Case Study on Non-Intrusive Appliance Load Monitoring [81.06807079998117]
非侵入的機器負荷モニタリング(NIALM)のための自動機械学習(AutoML)を実現する新しい手法を提案する。
NIALMは、電子機器や家電のエネルギー消費を測定するためのスマートメーターに代わる費用対効果を提供する。
論文 参考訳(メタデータ) (2022-03-06T10:12:56Z) - Cybertrust: From Explainable to Actionable and Interpretable AI (AI2) [58.981120701284816]
Actionable and Interpretable AI (AI2)は、AIレコメンデーションにユーザの信頼度を明確に定量化し視覚化する。
これにより、AIシステムの予測を調べてテストすることで、システムの意思決定に対する信頼の基盤を確立することができる。
論文 参考訳(メタデータ) (2022-01-26T18:53:09Z) - Measuring Ethics in AI with AI: A Methodology and Dataset Construction [1.6861004263551447]
我々は、AI技術のこのような新しい機能を使用して、AI測定能力を増強することを提案する。
我々は倫理的問題や関心事に関連する出版物を分類するモデルを訓練する。
私たちは、AIメトリクス、特に信頼できる公正なAIベースのツールや技術開発への彼らの貢献の意味を強調します。
論文 参考訳(メタデータ) (2021-07-26T00:26:12Z) - Building Bridges: Generative Artworks to Explore AI Ethics [56.058588908294446]
近年,人工知能(AI)技術が社会に与える影響の理解と緩和に重点が置かれている。
倫理的AIシステムの設計における重要な課題は、AIパイプラインには複数の利害関係者があり、それぞれがそれぞれ独自の制約と関心を持っていることだ。
このポジションペーパーは、生成的アートワークが、アクセス可能で強力な教育ツールとして機能することで、この役割を果たすことができる可能性のいくつかを概説する。
論文 参考訳(メタデータ) (2021-06-25T22:31:55Z) - An interdisciplinary conceptual study of Artificial Intelligence (AI)
for helping benefit-risk assessment practices: Towards a comprehensive
qualification matrix of AI programs and devices (pre-print 2020) [55.41644538483948]
本稿では,インテリジェンスの概念に対処するさまざまな分野の既存の概念を包括的に分析する。
目的は、AIシステムを評価するための共有概念や相違点を特定することである。
論文 参考訳(メタデータ) (2021-05-07T12:01:31Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。