Skip to main content
QUICK REVIEW

[論文レビュー] A Survey on Quantum Reinforcement Learning

Nico Meyer, Christian Ufrecht|arXiv (Cornell University)|Nov 7, 2022
Quantum Computing Algorithms and Architecture被引用数 30
ひとこと要約

QRL(量子強化学習)の総合的な調査で、量子にインスパイアされた手法、変分量子回路(VQC)に基づく手法、射影シミュレーション、ボルツマンマシン、およびNISQ後のアプローチを網羅し、近刊デバイスとフォールトトレラントの見通しに重点を置く。

ABSTRACT

Quantum reinforcement learning is an emerging field at the intersection of quantum computing and machine learning. While we intend to provide a broad overview of the literature on quantum reinforcement learning - our interpretation of this term will be clarified below - we put particular emphasis on recent developments. With a focus on already available noisy intermediate-scale quantum devices, these include variational quantum circuits acting as function approximators in an otherwise classical reinforcement learning setting. In addition, we survey quantum reinforcement learning algorithms based on future fault-tolerant hardware, some of which come with a provable quantum advantage. We provide both a birds-eye-view of the field, as well as summaries and reviews for selected parts of the literature.

研究の動機と目的

  • QRLの文献とその変種の広範な概観を提供する。
  • QRLの解釈を明確にし、純粋に古典的なもの、NISQ時代のもの、NISQ後のアプローチを区別する。
  • 主要なアルゴリズム系の要約とそれらのハードウェア要件を要約する。」],
  • method [

提案手法

  • 古典から量子まで、量子-古典ハイブリゼーションのレベルでQRLアルゴリズムを分類する。
  • 量子にインスパイアされたRL、VQCベースのQRL、射影シミュレーション、ボルツマンマシン、量子サブルーチンアプローチの詳細な要約を提示する。
  • 近期のNISQ実装と将来のフォールトトレラントなパラダイムの両方を、潜在的な量子優位性とともに議論する。
  • QRLアプローチを文脈化するために、基礎的なRLとQC(量子計算)の概念を説明する。

実験結果

リサーチクエスチョン

  • RQ1QRLアルゴリズムの主な系は何で、それらは量子-古典ハイブリゼーションの点でどう異なるのか。
  • RQ2代表的なQRLアプローチに必要なハードウェアレジーム(NISQ対フォールトトレラント)は何で、どこで量子優位性が期待されるのか。
  • RQ3変分量子回路がQRLにおける関数近似器としてどのように機能し、その利点/制約は何か。
  • RQ4RLにおける量子にインスパイアされた手法の役割は何か、そしてそれらは intrinsic な量子利点を提供するのか。
  • RQ5将来の研究方向を指針するために、QRLはどのように整理・レビューされるべきか。

主な発見

  • QRLは量子にインスパイアされた手法と、NISQ後のリソースと潜在的な量子優位性を用いた完全量子アプローチの両方を包含する。
  • VQCベースのQRLは、ハイブリッド量子古典RLパイプライン内で関数近似器として量子回路を使用する。
  • いくつかのQRLのバリアントは、将来のフォールトトレラント量子ハードウェアを前提としたサブルーチンやコンポーネントに依存している。
  • 近期の研究はNISQデバイスの活用に焦点を当て、NISQ後のアプローチの中には証明可能な量子優位性を目指すものもある。
  • この調査は、複数のサブ領域にわたる著名なQRL貢献の構造化された概要と詳細な要約を提供する。

より良い研究を、今すぐ始めましょう

論文の読解から最終レビューまで、研究時間を劇的に削減しましょう。

クレジットカード登録不要

このレビューはAIが作成し、人間の編集者が確認しました。