論文の概要: NextMe-800: Anticipating Personal Behavior from Months of Egocentric Video
- arxiv url: http://arxiv.org/abs/2610.01461v1
- Date: Thu, 01 Oct 2026 10:55:18 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-03 01:19:24.06836
- Title: NextMe-800: Anticipating Personal Behavior from Months of Egocentric Video
- Title（参考訳）: NextMe-800:エゴセントリックビデオの月ごとの個人行動予測
- Abstract要約: 我々は、NextMe-800を紹介した。NextMe-800は、1 Hzの画像、視線、オーディオを、原子活動から主要な活動までの5つの階層的な抽象化レベルにキャプションした126日間のボランティアによる1対1のデータセットである。
我々は,NextMe-800とマルチパーソンEgoLifeデータセットを組み合わせた1500点のベンチマークであるNextActを構築し,オープンボキャブラリKステップのシーケンス予測としてパーソナライズされたアクション予測を定式化する。
- 参考スコア（独自算出の注目度）: 12.12403956300408
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We often plan ambitiously yet act habitually and wonder, in retrospect, whether we would have planned differently had we known what we would actually do. Hindsight offers a valuable perspective on past decisions, although we often wish we could have simulated hindsight at the moment of choosing. If a system could generate plausible trajectories from one's personal history, such previews might help people formulate more realistic plans and make better informed decisions. We introduce NextMe-800, an approximately 800-hour first-person dataset from one volunteer over 126 days with 1 Hz images, gaze, and audio, captioned at five hierarchical abstraction levels from atomic actions to major activities. We formulate personalized action anticipation as open-vocabulary K-step sequence prediction and construct NextAct, a 1,500-point benchmark combining NextMe-800 with the multi-person EgoLife dataset. Using an embedding-based soft edit distance as the metric, we evaluate how well different models can anticipate personal behavior across abstraction levels and prediction horizons. NextMe-800 and NextAct provide a months-long resource and evaluation framework for studying how far ahead personal behavior can be anticipated from egocentric observation.
- Abstract（参考訳）: 私たちはしばしば、野心的にでも習慣的に行動し、実際に何をするかを知っていれば、異なる計画を立てていたかどうかを振り返って、疑問に思っています。
Hindsightは過去の決定について貴重な視点を提供するが、選択した時点では、後見をシミュレートできればよかったと願うことが多い。
システムが個人の歴史からもっともらしい軌跡を生成することができれば、そのようなプレビューは人々がより現実的な計画を定式化し、より良い情報的決定を下すのに役立つかもしれない。
我々は、NextMe-800を紹介した。NextMe-800は、1つのボランティアから126日間にわたって、1Hzの画像、視線、オーディオを、原子活動から主要な活動までの5つの階層的な抽象化レベルにキャプションした、約800時間の個人データセットである。
我々は,NextMe-800とマルチパーソンEgoLifeデータセットを組み合わせた1500点のベンチマークであるNextActを構築し,オープンボキャブラリKステップのシーケンス予測としてパーソナライズされたアクション予測を定式化する。
埋め込みベースのソフト編集距離を指標として,抽象レベルと予測地平線をまたいだ個人行動の予測を,異なるモデルがいかにうまく予測できるかを評価する。
NextMe-800とNextActは、エゴセントリックな観察から、個人の行動がどこまで進んでいるかを研究するための、数ヶ月にわたるリソースと評価フレームワークを提供する。
関連論文リスト
- See Tomorrow, Act Today: Foresight-Driven Autonomous Driving [87.02582063534608]
ForeSightは、予測された意思決定として自動運転を再設計する基礎的世界モデル中心の計画フレームワークである。
提案手法は,(1)事前学習された世界モデルを用いて,有望な未来世界を生成すること,(2)これらの未来を前提とした計画行動を行うこと,の2段階からなる。
論文 参考訳（メタデータ） (2026-05-08T03:42:05Z) - OPeRA: A Dataset of Observation, Persona, Rationale, and Action for Evaluating LLMs on Human Online Shopping Behavior Simulation [56.47029531207105]
OPERAは、ユーザペルソナ、ブラウザの観察、きめ細かいWebアクション、そして自己報告されたジャストインタイム論理を包括的にキャプチャする最初のパブリックデータセットである。
我々は,現在のLCMがユーザの次の行動と合理的性をどの程度予測できるかを評価するための最初のベンチマークを確立する。
論文 参考訳（メタデータ） (2025-06-05T21:37:49Z) - Personality-aware Human-centric Multimodal Reasoning: A New Task,
Dataset and Baselines [32.82738983843281]
我々はPersonality-aware Human-centric Multimodal Reasoning (PHMR) (T1)と呼ばれる新しいタスクを導入する。
課題は、過去の事例から得たマルチモーダル情報を用いて、個性要素を統合しながら、特定の個人の将来行動を予測することである。
実験の結果,性格特性を取り入れることで,人間中心の多モーダル推論性能が向上することが示された。
論文 参考訳（メタデータ） (2023-04-05T09:09:10Z) - A-ACT: Action Anticipation through Cycle Transformations [89.83027919085289]
未来を予測できる人間の能力が、機械学習アルゴリズムにどのように移行できるかを分析するために、一歩後退します。
人間の心理学に関する最近の研究は、発生を予測して、人間の脳が両方のシステムにカウントされていることを説明している。
本研究では,行動予測作業における各システムの影響について検討し,学習フレームワークに統合するためのパラダイムを導入する。
論文 参考訳（メタデータ） (2022-04-02T21:50:45Z) - Contingencies from Observations: Tractable Contingency Planning with
Learned Behavior Models [82.34305824719101]
人間は未来の出来事を正確に推論することで決定を下す素晴らしい能力を持っている。
本研究では,高次元のシーン観察からエンドツーエンドに学習する汎用コンテンシビリティプランナを開発する。
このモデルが行動観察から忍耐強くコンティンジェンシーを学習できることを示す。
論文 参考訳（メタデータ） (2021-04-21T14:30:20Z) - Learning to Anticipate Egocentric Actions by Imagination [60.21323541219304]
我々は,エゴセントリックなアクション予測タスクについて検討し,エゴセントリックなビデオの再生に先立って,将来のアクション秒を予測する。
本手法は, EPIC Kitchens Action Precipation Challenge の既視テストセットと未確認テストセットの両方において, 従来手法を有意に上回った。
論文 参考訳（メタデータ） (2021-01-13T08:04:10Z) - Knowledge Distillation for Action Anticipation via Label Smoothing [21.457069042129138]
視覚的観察や非言語的手がかりから未来を予測できる人間の能力は、インテリジェントなシステムを開発する上で不可欠である。
我々は,長期記憶(LSTM)ネットワークに基づくマルチモーダルフレームワークを実装し,過去の観測を要約し,異なる時間ステップで予測を行う。
実験により,ラベルの平滑化は動作予測のための最先端モデルの性能を体系的に向上することが示された。
論文 参考訳（メタデータ） (2020-04-16T15:38:53Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。