論文の概要: Quantum Imitation Learning
- arxiv url: http://arxiv.org/abs/2304.02480v1
- Date: Tue, 4 Apr 2023 12:47:35 GMT
- ステータス: 処理完了
- システム内更新日: 2023-04-06 12:24:30.255116
- Title: Quantum Imitation Learning
- Title(参考訳): 量子模倣学習
- Authors: Zhihao Cheng, Kaining Zhang, Li Shen, Dacheng Tao
- Abstract要約: 本稿では、量子優位性を利用してILを高速化する量子模倣学習(QIL)を提案する。
量子行動クローニング(Q-BC)と量子生成逆模倣学習(Q-GAIL)という2つのQILアルゴリズムを開発した。
実験結果から,Q-BCとQ-GAILの両者が,従来のものと同等の性能を達成できることが判明した。
- 参考スコア(独自算出の注目度): 74.15588381240795
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Despite remarkable successes in solving various complex decision-making
tasks, training an imitation learning (IL) algorithm with deep neural networks
(DNNs) suffers from the high computation burden. In this work, we propose
quantum imitation learning (QIL) with a hope to utilize quantum advantage to
speed up IL. Concretely, we develop two QIL algorithms, quantum behavioural
cloning (Q-BC) and quantum generative adversarial imitation learning (Q-GAIL).
Q-BC is trained with a negative log-likelihood loss in an off-line manner that
suits extensive expert data cases, whereas Q-GAIL works in an inverse
reinforcement learning scheme, which is on-line and on-policy that is suitable
for limited expert data cases. For both QIL algorithms, we adopt variational
quantum circuits (VQCs) in place of DNNs for representing policies, which are
modified with data re-uploading and scaling parameters to enhance the
expressivity. We first encode classical data into quantum states as inputs,
then perform VQCs, and finally measure quantum outputs to obtain control
signals of agents. Experiment results demonstrate that both Q-BC and Q-GAIL can
achieve comparable performance compared to classical counterparts, with the
potential of quantum speed-up. To our knowledge, we are the first to propose
the concept of QIL and conduct pilot studies, which paves the way for the
quantum era.
- Abstract(参考訳): 様々な複雑な意思決定タスクの解決に顕著な成功にもかかわらず、ディープニューラルネットワーク(DNN)を用いた模倣学習(IL)アルゴリズムのトレーニングは、高い計算負担に悩まされている。
本研究では,量子の優位性を利用してILを高速化する量子模倣学習(QIL)を提案する。
具体的には、量子行動クローニング(Q-BC)と量子生成逆模倣学習(Q-GAIL)という2つのQILアルゴリズムを開発する。
Q-BCは、広範囲な専門家データケースに適したオフラインで、負のログライクな損失で訓練されるのに対し、Q-GAILは、限られた専門家データケースに適したオンラインおよびオン政治の逆強化学習スキームで機能する。
両QILアルゴリズムは、DNNの代わりに変動量子回路(VQC)を採用し、データ再ロードとスケーリングパラメータで修正され、表現性を高める。
まず、古典データを入力として量子状態にエンコードし、次にvqcを行い、最後に量子出力を測定してエージェントの制御信号を得る。
実験の結果,Q-BCとQ-GAILはともに,量子スピードアップの可能性があり,従来のものと同等の性能を達成できることがわかった。
我々の知る限り、我々はQILの概念を初めて提案し、量子時代への道を開くパイロット研究を行っている。
関連論文リスト
- Efficient Learning for Linear Properties of Bounded-Gate Quantum Circuits [63.733312560668274]
d可変RZゲートとG-dクリフォードゲートを含む量子回路を与えられた場合、学習者は純粋に古典的な推論を行い、その線形特性を効率的に予測できるだろうか?
我々は、d で線形にスケーリングするサンプルの複雑さが、小さな予測誤差を達成するのに十分であり、対応する計算の複雑さは d で指数関数的にスケールすることを証明する。
我々は,予測誤差と計算複雑性をトレードオフできるカーネルベースの学習モデルを考案し,多くの実践的な環境で指数関数からスケーリングへ移行した。
論文 参考訳(メタデータ) (2024-08-22T08:21:28Z) - A Quantum-Classical Collaborative Training Architecture Based on Quantum
State Fidelity [50.387179833629254]
我々は,コ・テンク (co-TenQu) と呼ばれる古典量子アーキテクチャを導入する。
Co-TenQuは古典的なディープニューラルネットワークを41.72%まで向上させる。
他の量子ベースの手法よりも1.9倍も優れており、70.59%少ない量子ビットを使用しながら、同様の精度を達成している。
論文 参考訳(メタデータ) (2024-02-23T14:09:41Z) - QuantumSEA: In-Time Sparse Exploration for Noise Adaptive Quantum
Circuits [82.50620782471485]
QuantumSEAはノイズ適応型量子回路のインタイムスパース探索である。
1)トレーニング中の暗黙の回路容量と(2)雑音の頑健さの2つの主要な目標を達成することを目的としている。
提案手法は, 量子ゲート数の半減と回路実行の2倍の時間節約で, 最先端の計算結果を確立する。
論文 参考訳(メタデータ) (2024-01-10T22:33:00Z) - Quafu-RL: The Cloud Quantum Computers based Quantum Reinforcement
Learning [0.0]
本研究は,BAQIS Quafu量子コンピューティングクラウド上で,少なくとも136量子ビットを備えた実デバイス上で,ベンチマーク量子強化問題を実行するための第一歩である。
実験の結果,Reinforcement Learning (RL) エージェントはトレーニング段階と推論段階の両方でわずかに緩和された目標を達成することができることがわかった。
論文 参考訳(メタデータ) (2023-05-29T09:13:50Z) - Learning capability of parametrized quantum circuits [2.51657752676152]
変分量子アルゴリズム(VQA)とそのパラメタライズド量子回路(PQC)による量子機械学習分野への応用は、ノイズの多い中間スケール量子コンピューティングデバイスを活用する主要な方法の1つであると考えられている。
本稿では、Schuldらによる研究に基づいて、学習能力の新たな尺度を用いて、PQCの一般的なアンス・アゼと比較する。
また,Beerらが導入した分散量子ニューラルネットワーク(dQNN)についても検討し,その学習能力を高めるために,dQNNのデータ再アップロード構造を提案する。
論文 参考訳(メタデータ) (2022-09-21T13:26:20Z) - Recent Advances for Quantum Neural Networks in Generative Learning [98.88205308106778]
量子生成学習モデル(QGLM)は、古典的な学習モデルを上回る可能性がある。
機械学習の観点からQGLMの現状を概観する。
従来の機械学習タスクと量子物理学の両方におけるQGLMの潜在的な応用について論じる。
論文 参考訳(メタデータ) (2022-06-07T07:32:57Z) - Quantum neural networks [0.0]
この論文は、過去数十年で最もエキサイティングな研究分野である量子コンピューティングと機械学習を組み合わせたものだ。
本稿では、汎用量子計算が可能で、トレーニング中にメモリ要求の少ない散逸型量子ニューラルネットワーク(DQNN)を紹介する。
論文 参考訳(メタデータ) (2022-05-17T07:47:00Z) - Uncovering Instabilities in Variational-Quantum Deep Q-Networks [0.0]
変動量子深度Q-networks (VQ-DQN) は、学習ポリシーが分岐する不安定な状態にあることを示す。
我々は、実量子処理ユニット(IBM量子デバイス)上でRLアルゴリズムを実行し、シミュレーションされた量子システムと物理量子システムの振る舞いの違いを調査する。
論文 参考訳(メタデータ) (2022-02-10T17:52:44Z) - Variational quantum compiling with double Q-learning [0.37798600249187286]
強化学習(RL)に基づく変分量子コンパイル(VQC)アルゴリズムを提案する。
エージェントは、ネイティブゲートアルファベットとそれらが行う量子ビットから、二重Q学習によって順次量子ゲートを選択するように訓練される。
NISQデバイスのデコヒーレンスプロセスとゲートノイズによる量子アルゴリズムのエラーを減らすことができます。
論文 参考訳(メタデータ) (2021-03-22T06:46:35Z) - Quantum circuit architecture search for variational quantum algorithms [88.71725630554758]
本稿では、QAS(Quantum Architecture Search)と呼ばれるリソースと実行時の効率的なスキームを提案する。
QASは、よりノイズの多い量子ゲートを追加することで得られる利点と副作用のバランスをとるために、自動的にほぼ最適アンサッツを求める。
数値シミュレータと実量子ハードウェアの両方に、IBMクラウドを介してQASを実装し、データ分類と量子化学タスクを実現する。
論文 参考訳(メタデータ) (2020-10-20T12:06:27Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。