論文の概要: $λ$-Reachability: Geometric-Horizon Safety Bellman Equations for Humanoid Safety
- arxiv url: http://arxiv.org/abs/2606.16022v1
- Date: Sun, 14 Jun 2026 21:07:32 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-16 18:36:04.995911
- Title: $λ$-Reachability: Geometric-Horizon Safety Bellman Equations for Humanoid Safety
- Title(参考訳): λ$-Reachability:ヒューマノイド安全のための幾何学的水平安全ベルマン方程式
- Abstract要約: 高次元ロボットシステムに対するハミルトン-ヤコビの安全性解析にスケーラブルなアプローチである$-Reachabilityを導入する。
$$-Reachabilityは、幾何学的に分散されたロールアウト水平線とランダムに吸収された端末を利用する。
実験の結果,$$-Reachabilityは安全な境界分類と安全マージン推定の両方を著しく改善することが示された。
- 参考スコア(独自算出の注目度): 14.087630399656987
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We introduce $λ$-Reachability, a scalable approach to Hamilton--Jacobi safety analysis for high-dimensional robotic systems. Unlike prior discounted formulations that rely on fixed one-step Bellman updates, $λ$-Reachability employs a stochastic multi-step estimator of the safety value, using a geometrically distributed rollout horizon together with a randomly absorbed terminal. Conceptually analogous to TD($λ$), $λ$-Reachability interpolates between local self-consistency updates and long-horizon max-over-trajectory safety targets via an interpretable horizon-control parameter. Unlike TD($λ$), where the terminal value is always incorporated in learning targets, the terminal safety value in $λ$-Reachability is only used at a probability controlled by parameter $δ$. We formally show that for $δ<1$, the update induces a contraction mapping that allows temporal-difference learning; as $λ\to 1$, the estimator recovers the undiscounted reachability objective. We apply $λ$-Reachability to high-dimensional safety learning problems with both simulated and real humanoid robots under balance and collision avoidance constraints. Experimental results demonstrate that $λ$-Reachability significantly improves both safe-set boundary classification and safety margin estimation compared to single-step temporal-difference baselines.
- Abstract(参考訳): 高次元ロボットシステムに対するハミルトン-ヤコビの安全性解析にスケーラブルなアプローチであるλ$-Reachabilityを導入する。
固定されたワンステップのベルマン更新に依存する以前の割引形式とは異なり、$λ$-Reachabilityは、幾何学的に分散されたロールアウト水平線とランダムに吸収された端末を用いて、安全値の確率的マルチステップ推定器を使用する。
概念的にはTD($λ$)と類似しており、$λ$-Reachabilityは、局所的な自己整合性更新と、解釈可能な地平線制御パラメータを介して、軌道上の極大目標の間の補間を行う。
TD($λ$)とは異なり、端末の安全性値はパラメータ$δ$で制御される確率でのみ使用される。
公式には、$δ<1$の場合、この更新は時間差学習を可能にする縮約写像を誘導する。
衝突回避制約下でのシミュレーションと実ヒューマノイドロボットによる高次元安全学習問題に対して,λ$-Reachability を適用した。
実験の結果, λ$-Reachabilityは単一ステップの時間差ベースラインと比較して, 安全セット境界分類と安全マージン推定の両方を著しく改善することが示された。
関連論文リスト
- Stability and Generalization of Straight-Through Estimators for Training Two-Layer Quantized Neural Networks [16.84694273405234]
ヒンジロスを伴う2層2層活性化ネットワークを訓練するための恒常的ストレートスルー推定器(STE)について検討した。
我々の中心的な問題は、アルゴリズム安定性が不連続なSTEトレーニングルールによって生成される推定器の統計的一般化を説明することができるかどうかである。
論文 参考訳(メタデータ) (2026-09-06T07:12:16Z) - SANE: State Anomaly Neutralization for Stable Extreme-Context Delta-Rule Models [53.86918766240095]
Delta-Ruleリカレントモデルは固定サイズの状態を維持しており、$O(1)$の推論メモリが可能であるが、極端なコンテキスト外挿では不安定になる可能性がある。
我々は,チャンク内並列構造を保ちながら,チャンク境界における適応$tanh$圧縮を適用したtextbfState Anomaly Neutralization (SANE)を提案する。
論文 参考訳(メタデータ) (2026-08-23T10:41:07Z) - Prospect-Theory Behavior from Bellman Optimality in MDPs with Catastrophic States [0.0]
報酬は線形だが、エージェントは効用依存や曲率を持たず、大災害のペイオフは$r = 1.25$、または$r = 2$で13.9%である。
単価より1ドル高いところは、中央値がある。
1ドル以上は 中央値です
1ドル以上は 中央値です
1ドル以上は 中央値です
上のユニティは 境界のコントリビューションを超越しています
全ての細胞への貢献です
論文 参考訳(メタデータ) (2026-05-31T03:01:48Z) - Safe and Steerable Geometric Motion Policies for Robotic Dexterous Manipulation [14.608382868752463]
セーフPBDS(Safe Pullback Bundle Dynamical Systems)を提案する。
最適かつ確実に安全な構成多様体加速度を目的と安全性の要件から計算する。
ゆるやかな把握では、SafePBDSは20の家庭オブジェクトと120のトライアルで922.5%の成功率を達成した。
論文 参考訳(メタデータ) (2026-05-20T23:16:01Z) - Tight Convergence Rates for Online Distributed Linear Estimation with Adversarial Measurements [66.94250413799232]
分散パラメータ-サーバ-ワーカー設定における乱数ベクトル$X$の推定について検討する。
主な課題は、敵の計測と非同期である。
その結果, 分散線形推定におけるロバスト性, 識別性, 統計的効率の統一的有限時間評価が得られた。
論文 参考訳(メタデータ) (2026-04-07T11:45:55Z) - Optimal Unconstrained Self-Distillation in Ridge Regression: Strict Improvements, Precise Asymptotics, and One-Shot Tuning [61.07540493350384]
自己蒸留(英: Self-distillation, SD)とは、教師自身の予測と地道の混合で学生を訓練する過程である。
任意の予測リスクに対して、各正規化レベルにおいて、最適に混合された学生がリッジ教師に改善されることが示される。
本稿では,グリッド探索やサンプル分割,再構成なしに$star$を推定する一貫したワンショットチューニング手法を提案する。
論文 参考訳(メタデータ) (2026-02-19T17:21:15Z) - Generalized Linear Bandits: Almost Optimal Regret with One-Pass Update [70.38810219913593]
非線形リンク関数を組み込んで古典線形モデルを拡張したコンテキスト型多武装バンディットフレームワークである一般化線形バンディット問題(GLB)について検討する。
GLBは現実世界のシナリオに広く適用できるが、その非線形性は計算効率と統計効率の両方を達成する上で大きな課題をもたらす。
本稿では,$mathcalO(1)$時間と1ラウンドあたりの空間複雑度をほぼ最適に再現するアルゴリズムを提案する。
論文 参考訳(メタデータ) (2025-07-16T02:24:21Z) - Scalable Primal-Dual Actor-Critic Method for Safe Multi-Agent RL with
General Utilities [12.104551746465932]
安全マルチエージェント強化学習について検討し、エージェントはそれぞれの安全制約を満たしつつ、局所的な目的の総和をまとめて最大化しようとする。
我々のアルゴリズムは、$mathcalOleft(T-2/3right)$のレートで1次定常点(FOSP)に収束する。
サンプルベースの設定では、高い確率で、我々のアルゴリズムは、$epsilon$-FOSPを達成するために$widetildemathcalOleft(epsilon-3.5right)$サンプルが必要です。
論文 参考訳(メタデータ) (2023-05-27T20:08:35Z) - Safe Reinforcement Learning with Linear Function Approximation [48.75026009895308]
我々は、状態と行動の未知の線形コスト関数として安全を導入し、それは常に一定の閾値以下でなければならない。
次に,線形関数近似を用いたマルコフ決定過程(MDP)について,SLUCB-QVIおよびRSLUCB-QVIと呼ぶアルゴリズムを提案する。
SLUCB-QVI と RSLUCB-QVI は、Emphno safety violation で $tildemathcalOleft(kappasqrtd3H3Tright)$ regret, almost matching を達成した。
論文 参考訳(メタデータ) (2021-06-11T08:46:57Z) - Safe Learning under Uncertain Objectives and Constraints [66.05180398174286]
我々は、テキスト不明で安全クリティカルな制約の下で、非テクスト無知かつ安全クリティカルな最適化問題を考察する。
このような問題は、ロボティクス、製造、医療などの様々な領域で自然に発生する。
我々の分析の重要な要素は、安全な最適化の文脈で収縮と呼ばれる手法を導入し、適用することである。
論文 参考訳(メタデータ) (2020-06-23T20:51:00Z) - Provably Efficient Safe Exploration via Primal-Dual Policy Optimization [105.7510838453122]
制約付きマルコフ決定過程(CMDP)を用いた安全強化学習(SRL)問題について検討する。
本稿では,関数近似設定において,安全な探索を行うCMDPの効率の良いオンラインポリシー最適化アルゴリズムを提案する。
論文 参考訳(メタデータ) (2020-03-01T17:47:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。