論文の概要: Probing Prompt Design for Socially Compliant Robot Navigation with Vision Language Models
- arxiv url: http://arxiv.org/abs/2601.14622v1
- Date: Wed, 21 Jan 2026 03:45:33 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-03-23 08:17:40.87469
- Title: Probing Prompt Design for Socially Compliant Robot Navigation with Vision Language Models
- Title(参考訳): 視覚言語モデルを用いた社会適応型ロボットナビゲーションのプロンプト設計
- Abstract要約: 言語モデルは、ますますソーシャルロボットナビゲーションに使われている。
既存のベンチマークは、社会的に従順な行動のための急進的な設計を概ね見落としていた。
システムガイダンスとモチベーションフレーミングの2つの側面に沿ってプロンプトデザインを研究する。
- 参考スコア(独自算出の注目度): 31.097911935522674
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Language models are increasingly used for social robot navigation, yet existing benchmarks largely overlook principled prompt design for socially compliant behavior. This limitation is particularly relevant in practice, as many systems rely on small vision language models (VLMs) for efficiency. Compared to large language models, small VLMs exhibit weaker decision-making capabilities, making effective prompt design critical for accurate navigation. Inspired by cognitive theories of human learning and motivation, we study prompt design along two dimensions: system guidance (action-focused, reasoning-oriented, and perception-reasoning prompts) and motivational framing, where models compete against humans, other AI systems, or their past selves. Experiments on two socially compliant navigation datasets reveal three key findings. First, for non-finetuned GPT-4o, competition against humans achieves the best performance, while competition against other AI systems performs worst. For finetuned models, competition against the model's past self yields the strongest results, followed by competition against humans, with performance further influenced by coupling effects among prompt design, model choice, and dataset characteristics. Second, inappropriate system prompt design can significantly degrade performance, even compared to direct finetuning. Third, while direct finetuning substantially improves semantic-level metrics such as perception, prediction, and reasoning, it yields limited gains in action accuracy. In contrast, our system prompts produce a disproportionately larger improvement in action accuracy, indicating that the proposed prompt design primarily acts as a decision-level constraint rather than a representational enhancement.
- Abstract(参考訳): 言語モデルは、ますます社会ロボットナビゲーションに使われているが、既存のベンチマークは、社会的に従順な行動のためのプロンプトデザインを概ね見落としている。
この制限は、多くのシステムが効率のために小さな視覚言語モデル(VLM)に依存しているため、実際は特に関係がある。
大規模な言語モデルと比較すると、小さなVLMはより弱い意思決定能力を示し、正確なナビゲーションに効果的なプロンプト設計を重要視している。
人間の学習とモチベーションの認知理論にインスパイアされた私たちは、システムガイダンス(行動中心、推論指向、知覚推論のプロンプト)とモチベーションフレーミング(モデルが人間、他のAIシステム、あるいは過去の自分自身と競合する)という2つの側面に沿って、プロンプトデザインを研究する。
ソーシャルに準拠する2つのナビゲーションデータセットの実験では、3つの重要な発見が明らかになった。
第一に、非精細なGPT-4oでは、人間との競争が最高のパフォーマンスを達成する一方、他のAIシステムとの競争は最悪である。
微調整されたモデルでは、過去の自己に対する競争が最強の結果となり、続いて人間に対する競争が続き、パフォーマンスはプロンプト設計、モデル選択、データセット特性の結合効果にさらに影響される。
第二に、不適切なシステムプロンプト設計は直接微調整と比較して性能を著しく低下させる可能性がある。
第三に、直接微調整は知覚、予測、推論といった意味レベルの指標を大幅に改善する一方で、行動精度が制限される。
これとは対照的に,本システムでは,動作精度の大幅な向上を図り,提案したプロンプト設計が表現の強化よりも決定レベルの制約として機能することを示唆している。
関連論文リスト
- Metis: A Generalizable and Efficient World-Action Model for Autonomous Driving and Urban Navigation [80.18527639791074]
世界アクションモデルは、自動運転と都市ナビゲーションに非常に有望だ。
既存のアプローチには、重要な制限がある。
我々は,映像生成とアクション予測を分離するエンドツーエンドのWAMフレームワークであるMetisを提案する。
論文 参考訳(メタデータ) (2026-06-14T15:40:49Z) - An End-to-End Decision-Aware Multi-Scale Attention-Based Model for Explainable Autonomous Driving [0.6662501454516897]
本稿では,運転決定を推論コンポーネントに入力し,各意思決定に対してケース固有の説明を同時に提供するマルチスケール注意ベースモデルを提案する。
その結果,従来のモデルと最先端モデルに比較して,推論ネットワークの優位性が示された。
論文 参考訳(メタデータ) (2026-04-30T23:27:39Z) - Phi-4-reasoning-vision-15B Technical Report [9.716062019697967]
コンパクトなオープンウェイトマルチモーダル推論モデルであるPhi-4-reasoning-vision-15Bを提案する。
私たちは、その開発を知らせるモチベーション、デザインの選択、実験、学習を共有しています。
論文 参考訳(メタデータ) (2026-03-04T12:16:53Z) - To Think or Not To Think, That is The Question for Large Reasoning Models in Theory of Mind Tasks [56.11584171938381]
心の理論 (ToM) は、モデルが信念、欲望、意図などの隠された精神状態を推測できるかどうかを評価する。
近年のLRM(Large Reasoning Models)の進歩により、数学やコーディングにおけるステップバイステップ推論が向上している。
本研究では,9つの大規模言語モデル(LLM)の体系的研究を行い,推論モデルと非推論モデルを比較した。
論文 参考訳(メタデータ) (2026-02-11T08:16:13Z) - Rethinking Visual-Language-Action Model Scaling: Alignment, Mixture, and Regularization [65.37179698521766]
VLA(Vision-Language-Action)モデルは、ジェネラリストロボットの制御を強く約束する。
標準的な「スケールデータ」レシピがロボット工学に翻訳されるかどうかはまだ不明だ。
本稿では,多様なロボットを対象とした事前学習のためのコアトレーニング選択を再考する,VLAスケーリングの体系的かつ制御された研究を提案する。
論文 参考訳(メタデータ) (2026-02-10T12:25:43Z) - Omni-AutoThink: Adaptive Multimodal Reasoning via Reinforcement Learning [57.96134674544638]
本稿では,タスクの難易度に応じてモデルの推論深度を動的に調整する適応推論フレームワークを提案する。
本研究の枠組みは,(1)大規模推論データを用いた基本推論能力を備えた適応監視ファインチューニング段階,(2)タスク複雑性と報酬フィードバックに基づく推論行動の最適化を行う適応強化学習段階の2段階からなる。
論文 参考訳(メタデータ) (2025-12-03T13:33:28Z) - Counteracting Matthew Effect in Self-Improvement of LVLMs through Head-Tail Re-balancing [70.35701681177655]
自己改善は、大きな視覚言語モデルの推論能力を向上するための主流パラダイムとして現れてきた。
本研究では,探索学習による自己改善プロセスにおいて,頭部再バランスを実現するための4つの効率的な戦略を提案する。
我々の手法は視覚的推論能力を常に改善し、バニラ自己改善を平均3.86ポイント上回る。
論文 参考訳(メタデータ) (2025-10-30T13:26:58Z) - More Thought, Less Accuracy? On the Dual Nature of Reasoning in Vision-Language Models [17.431298099935344]
大規模言語モデル(LLM)において、推論が重要な機能として現れている。
近年の研究では、視覚言語モデル(VLM)への推論の拡張が試みられている。
本研究は、マルチモーダル推論の二重性を明らかにし、他の基本的な視覚的問題に対する認識障害につながった。
本稿では,視覚的接地軌道に対する推論過程を明確に把握する,シンプルかつ効果的な手法であるビジョン・アンコレッド・ポリシー・オプティマイズ(VAPO)を提案する。
論文 参考訳(メタデータ) (2025-09-30T06:37:47Z) - AlphaMaze: Enhancing Large Language Models' Spatial Intelligence via GRPO [0.0]
大きな言語モデル(LLM)は、言語処理において印象的な能力を示してきたが、視覚的な空間的推論を必要とするタスクにしばしば苦労している。
迷路ナビゲーションのための視覚的推論能力を備えた標準LLMの2段階学習フレームワークを提案する。
論文 参考訳(メタデータ) (2025-02-20T16:05:18Z) - USER-VLM 360: Personalized Vision Language Models with User-aware Tuning for Social Human-Robot Interactions [6.2486440301992605]
本稿では,マルチモーダル・ユーザ・モデリングとバイアス・アウェア・最適化を統合した総合的なフレームワークであるUser-VLM 360degを提案する。
提案手法は,(1)視覚言語信号を用いてリアルタイムに対話を適応するユーザ・アウェア・チューニング,(2)嗜好最適化によるバイアス緩和,(3)人口統計,感情,関係メタデータを付加した360degの社会動機的相互作用データセットをキュレートした。
論文 参考訳(メタデータ) (2025-02-15T02:25:49Z) - Visual Agents as Fast and Slow Thinkers [88.1404921693082]
本稿では、Fast and Slow Thinking機構を視覚エージェントに組み込んだFaSTを紹介する。
FaSTは、システム1/2モード間の動的選択にスイッチアダプタを使用する。
モデルの信頼性を調整し、新しいコンテキストデータを統合することで、不確実で目に見えないオブジェクトに取り組む。
論文 参考訳(メタデータ) (2024-08-16T17:44:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。