論文の概要: DreamTrue: Action-Faithful Robot World Model with Counterfactual Post-Training
- arxiv url: http://arxiv.org/abs/2610.12468v1
- Date: Thu, 08 Oct 2026 17:59:51 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-10 02:36:54.273999
- Title: DreamTrue: Action-Faithful Robot World Model with Counterfactual Post-Training
- Title(参考訳): DreamTrue: 反現実的なポストトライニングを備えたアクションファクトフルロボットワールドモデル
- Abstract要約: 本稿では,多視点多体ロボットDreamTrueについて紹介する。
私たちのモデルは、AgiBot World Challenge 2026のワールドモデルトラックで第1位です。
- 参考スコア(独自算出の注目度): 27.829272699915137
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We present DreamTrue, a multi-view, cross-embodiment robot world model for action-faithful and physically plausible video prediction. Training such a model on existing robot datasets faces two obstacles: imprecise calibration can impair action following, while limited coverage of unsuccessful interactions can bias predictions toward successful outcomes. To improve action following across embodiments, we render action trajectories into image-space conditions and introduce offline geometric calibration to align these conditions with the target videos. To broaden interaction coverage, we introduce counterfactual post-training, modifying recorded action trajectories and generating future videos under a wider range of actions and contact configurations. To provide feedback on these predictions without paired ground-truth futures, we construct a human-annotated video dataset covering robot, object, and interaction defects and use it to train an embodied video reward model. Its scores guide reinforcement-learning post-training toward more physically plausible interaction outcomes. On AgiBot, DreamTrue attains state-of-the-art action following, while reducing the human-assessed interaction defect rate from from 48.12% to 6.25%. Notably, our model ranks first in the world model track of the AgiBot World Challenge 2026. The project page can be found at https://brave-eai.github.io/DreamTrue.
- Abstract(参考訳): 本稿では,多視点多体ロボットDreamTrueについて紹介する。
既存のロボットデータセット上でそのようなモデルをトレーニングすることは、2つの障害に直面している。
動作軌跡を画像空間に描画し,これらの条件を対象映像と整合させるオフライン幾何キャリブレーションを導入する。
インタラクションのカバレッジを拡大するために、我々は、反実的なポストトレーニング、記録されたアクショントラジェクトリの変更、より広い範囲のアクションおよびコンタクト構成下での将来のビデオの生成を導入します。
そこで本研究では,ロボット,オブジェクト,インタラクション欠陥をカバーする人手によるビデオデータセットを構築し,それを具体的ビデオ報酬モデルのトレーニングに利用する。
そのスコアは、より物理的に妥当な相互作用結果に向けた強化学習後の学習を導く。
AgiBotでは、DreamTrueは続いて最先端のアクションを達成し、人間によるインタラクションの欠陥率を48.12%から6.25%に下げた。
特に、私たちのモデルはAgiBot World Challenge 2026のワールドモデルトラックで第1位です。
プロジェクトのページはhttps://brave-eai.github.io/DreamTrue.orgにある。
関連論文リスト
- AnyWorld: Factorized Egocentric World Models for Cross-Embodiment Generalization [88.25615187835321]
我々は,クロス・エボディメント・ワールド・モデリング・フレームワークであるAnyWorldを提案する。
私たちのモデルは、アクション、カメラ、エンボディメントへのインタラクションを分解します。
大規模なヒューマンインタラクション事前トレーニングでモデルをトレーニングする。
論文 参考訳(メタデータ) (2026-08-29T12:55:15Z) - Robot-Factored World Models via Robot Rendering [25.12876640584098]
アクション条件付きビデオワールドモデルは、初期観測と行動信号から将来の観測を予測する。
本研究では,ロボット特異的な2つの要素を世界モデル外へ移動させるロボット駆動世界モデルを提案する。
実験により, レンダリングインタフェースはベクトル条件付きベースラインより優れており, 未知のロボットエンボディメント推論に一般化されていることがわかった。
論文 参考訳(メタデータ) (2026-07-24T17:59:57Z) - H2R-Grounder: A Paired-Data-Free Paradigm for Translating Human Interaction Videos into Physically Grounded Robot Videos [58.006918399913665]
本稿では,通常の人間と物体のインタラクションビデオからモーション一貫性のあるロボット操作ビデオに変換するビデオ間翻訳フレームワークを提案する。
私たちのアプローチでは、ロボットビデオのセットのみをトレーニングするために、ペアの人間ロボットビデオは必要とせず、システムを拡張しやすくしています。
テスト時にも同じプロセスを人間のビデオに適用し、人間の行動を模倣する高品質なロボットビデオを生成する。
論文 参考訳(メタデータ) (2025-12-10T07:59:45Z) - ViPRA: Video Prediction for Robot Actions [33.310474967770894]
我々は、アクションレスビデオから連続ロボット制御を学ぶためのフレームワークViPRA(Video Prediction for Robot Actions)を提案する。
アクションを直接予測する代わりに、将来の視覚的観察と動き中心の潜伏行動の両方を予測するためにビデオ言語モデルを訓練する。
下流制御では,潜時動作をロボット固有の連続動作シーケンスにマッピングするチャンクフローマッチングデコーダを導入する。
論文 参考訳(メタデータ) (2025-11-11T01:33:03Z) - MimicDreamer: Aligning Human and Robot Demonstrations for Scalable VLA Training [40.45924128424013]
低コストな人間によるデモンストレーションをロボットで使用可能な監視に変換するフレームワークであるMimicDreamerを提案する。
視覚的アライメントのために,高忠実度ロボットデモビデオを生成するビデオ拡散モデルH2R Alignerを提案する。
視点安定化のためにEgoStabilizerを提案する。
動作アライメントのために,人間の手の動きをロボットフレームにマッピングし,制約付き逆運動学解法を適用する。
論文 参考訳(メタデータ) (2025-09-26T11:05:10Z) - Physical Autoregressive Model for Robotic Manipulation without Action Pretraining [65.8971623698511]
我々は、自己回帰ビデオ生成モデルを構築し、物理自己回帰モデル(PAR)を提案する。
PARは、アクション事前トレーニングを必要とせず、物理力学を理解するために、ビデオ事前トレーニングに埋め込まれた世界の知識を活用する。
ManiSkillベンチマークの実験は、PARがPushCubeタスクで100%の成功率を達成したことを示している。
論文 参考訳(メタデータ) (2025-08-13T13:54:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。