論文の概要: On Realization of Intelligent Decision-Making in the Real World: A
Foundation Decision Model Perspective
- arxiv url: http://arxiv.org/abs/2212.12669v2
- Date: Tue, 16 May 2023 07:03:19 GMT
- ステータス: 処理完了
- システム内更新日: 2023-05-17 19:05:46.745045
- Title: On Realization of Intelligent Decision-Making in the Real World: A
Foundation Decision Model Perspective
- Title(参考訳): 実世界における知的意思決定の実現について:基礎決定モデルの観点から
- Authors: Ying Wen, Ziyu Wan, Ming Zhou, Shufang Hou, Zhe Cao, Chenyang Le,
Jingxiao Chen, Zheng Tian, Weinan Zhang, Jun Wang
- Abstract要約: FDM(Foundation Decision Model)は、様々な意思決定タスクをシーケンスデコーディングタスクとして定式化することで開発することができる。
本稿では、FDMの実装であるDigitalBrain(DB1)を13億のパラメータで実証し、870のタスクで人間レベルのパフォーマンスを達成するケーススタディを提案する。
- 参考スコア(独自算出の注目度): 54.38373782121503
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: The pervasive uncertainty and dynamic nature of real-world environments
present significant challenges for the widespread implementation of
machine-driven Intelligent Decision-Making (IDM) systems. Consequently, IDM
should possess the ability to continuously acquire new skills and effectively
generalize across a broad range of applications. The advancement of Artificial
General Intelligence (AGI) that transcends task and application boundaries is
critical for enhancing IDM. Recent studies have extensively investigated the
Transformer neural architecture as a foundational model for various tasks,
including computer vision, natural language processing, and reinforcement
learning. We propose that a Foundation Decision Model (FDM) can be developed by
formulating diverse decision-making tasks as sequence decoding tasks using the
Transformer architecture, offering a promising solution for expanding IDM
applications in complex real-world situations. In this paper, we discuss the
efficiency and generalization improvements offered by a foundation decision
model for IDM and explore its potential applications in multi-agent game AI,
production scheduling, and robotics tasks. Lastly, we present a case study
demonstrating our FDM implementation, DigitalBrain (DB1) with 1.3 billion
parameters, achieving human-level performance in 870 tasks, such as text
generation, image captioning, video game playing, robotic control, and
traveling salesman problems. As a foundation decision model, DB1 represents an
initial step toward more autonomous and efficient real-world IDM applications.
- Abstract(参考訳): 実世界の環境の広範にわたる不確実性と動的性質は、機械駆動型知的意思決定システム(IDM)の広範な実装に重大な課題をもたらす。
したがって、idmは新しいスキルを継続的に獲得し、幅広いアプリケーションにわたって効果的に一般化する能力を持つべきである。
タスクとアプリケーション境界を超越する人工知能(AGI)の進歩は、IMMの強化に不可欠である。
近年,コンピュータビジョン,自然言語処理,強化学習など,様々なタスクの基本モデルとしてTransformer Neural Architectureが広く研究されている。
本稿では,トランスフォーマーアーキテクチャを用いて,多種多様な意思決定タスクをシーケンスデコードタスクとして定式化し,複雑な実環境においてIMMアプリケーションを拡張するための有望なソリューションを提供することにより,FDM(Foundation Decision Model)を開発することを提案する。
本稿では,IMMの基礎決定モデルによって提供される効率性と一般化の改善について論じ,マルチエージェントゲームAI,生産スケジューリング,ロボット工学タスクにおけるその可能性を探る。
最後に,我々のfdm実装を実証する事例として,13億パラメータのdigitalbrain(db1)を提案する。テキスト生成,画像キャプション,ビデオゲームプレイ,ロボット制御,旅行セールスマン問題など870のタスクにおいて,人間レベルのパフォーマンスを実現する。
基礎決定モデルとして、DB1はより自律的で効率的な実世界のIMMアプリケーションに向けた最初のステップである。
関連論文リスト
- Collaborative AI in Sentiment Analysis: System Architecture, Data Prediction and Deployment Strategies [3.3374611485861116]
大規模言語モデル(LLM)に基づく人工知能技術は、特に感情分析においてゲームチェンジャーとなっている。
しかし、複雑なマルチモーダルデータを処理するための多様なAIモデルの統合と、それに伴う機能抽出の高コストは、大きな課題を呈している。
本研究では,様々なAIシステムにまたがるタスクを効率的に分散・解決するための協調型AIフレームワークを提案する。
論文 参考訳(メタデータ) (2024-10-17T06:14:34Z) - On the Modeling Capabilities of Large Language Models for Sequential Decision Making [52.128546842746246]
大規模な事前訓練されたモデルでは、推論や計画タスクのパフォーマンスがますます向上している。
我々は、直接的または間接的に、意思決定ポリシーを作成する能力を評価する。
未知の力学を持つ環境において、合成データを用いた微調整LDMが報酬モデリング能力を大幅に向上させる方法について検討する。
論文 参考訳(メタデータ) (2024-10-08T03:12:57Z) - Online Decision MetaMorphFormer: A Casual Transformer-Based Reinforcement Learning Framework of Universal Embodied Intelligence [2.890656584329591]
Online Decision MetaMorphFormer (ODM)は、自己認識、環境認識、行動計画の実現を目的としている。
ODMは、異なる環境にあるマルチジョイントボディを持つ任意のエージェントに適用することができ、大規模な事前トレーニングデータセットを使用して、さまざまなタイプのタスクでトレーニングすることができる。
論文 参考訳(メタデータ) (2024-09-11T15:22:43Z) - Ontology-Enhanced Decision-Making for Autonomous Agents in Dynamic and Partially Observable Environments [0.0]
この論文では、自律エージェントのためのオントロジー強化意思決定モデル(OntoDeM)を紹介している。
OntoDeMはエージェントのドメイン知識を充実させ、予期せぬイベントを解釈し、目標を生成または適応させ、より良い意思決定を可能にする。
OntoDeMは従来の学習アルゴリズムや高度な学習アルゴリズムと比較して、動的で部分的に観察可能な環境におけるエージェントの観察と意思決定を改善する上で優れた性能を示している。
論文 参考訳(メタデータ) (2024-05-27T22:52:23Z) - An Interactive Agent Foundation Model [49.77861810045509]
本稿では,AIエージェントを訓練するための新しいマルチタスクエージェントトレーニングパラダイムを用いた対話型エージェント基礎モデルを提案する。
トレーニングパラダイムは、視覚マスク付きオートエンコーダ、言語モデリング、次世代の予測など、多様な事前学習戦略を統一する。
私たちは、ロボティクス、ゲームAI、ヘルスケアという3つの異なる領域でフレームワークのパフォーマンスを実演します。
論文 参考訳(メタデータ) (2024-02-08T18:58:02Z) - A Survey on Robotics with Foundation Models: toward Embodied AI [30.999414445286757]
近年のコンピュータビジョン,自然言語処理,マルチモーダリティ学習の進歩は,基礎モデルが特定のタスクに対して超人的能力を持つことを示している。
この調査は、ロボット工学の基礎モデルの包括的で最新の概要を提供し、自律的な操作に焦点を当て、高レベルの計画と低レベルの制御を包含することを目的としている。
論文 参考訳(メタデータ) (2024-02-04T07:55:01Z) - Forging Vision Foundation Models for Autonomous Driving: Challenges,
Methodologies, and Opportunities [59.02391344178202]
ビジョンファウンデーションモデル(VFM)は、幅広いAIアプリケーションのための強力なビルディングブロックとして機能する。
総合的なトレーニングデータの不足、マルチセンサー統合の必要性、多様なタスク固有のアーキテクチャは、VFMの開発に重大な障害をもたらす。
本稿では、自動運転に特化したVFMを鍛造する上で重要な課題について述べるとともに、今後の方向性を概説する。
論文 参考訳(メタデータ) (2024-01-16T01:57:24Z) - Transferring Foundation Models for Generalizable Robotic Manipulation [82.12754319808197]
インターネット規模の基盤モデルによって生成された言語推論セグメンテーションマスクを効果的に活用する新しいパラダイムを提案する。
提案手法は,オブジェクトのポーズを効果的かつ堅牢に知覚し,サンプル効率のよい一般化学習を可能にする。
デモは提出されたビデオで見ることができ、より包括的なデモはlink1またはlink2で見ることができます。
論文 参考訳(メタデータ) (2023-06-09T07:22:12Z) - DIME: Fine-grained Interpretations of Multimodal Models via Disentangled
Local Explanations [119.1953397679783]
我々は,マルチモーダルモデルの解釈における最先端化に注力する。
提案手法であるDIMEは,マルチモーダルモデルの高精度かつきめ細かな解析を可能にする。
論文 参考訳(メタデータ) (2022-03-03T20:52:47Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。