論文の概要: TempGlitch: Evaluating Vision-Language Models for Temporal Glitch Detection in Gameplay Videos

• arxiv url: http://arxiv.org/abs/2605.21443v1
• Date: Wed, 20 May 2026 17:32:26 GMT
• ステータス: 翻訳完了
• システム内更新日: 2026-05-21 19:19:56.816002
• Title: TempGlitch: Evaluating Vision-Language Models for Temporal Glitch Detection in Gameplay Videos
• Title（参考訳）: TempGlitch: ゲームプレイビデオにおける時間的グリッチ検出のための視覚言語モデルの評価
• Authors: Yakun Yu, Ashley Wiens, Adrián Barahona-Ríos, Benedict Wilkins, Saman Zadtootaghaj, Nabajeet Barman, Cor-Paul Bezemer,
• Abstract要約: 我々は、いくつかのグリッチが孤立したフレームで空間的かつ可視的であるのに対して、他のグリッチは時間的であり、順序付けられたフレーム間の変化によってのみ明らかになると主張している。 そこで本研究では,時間的グリッチ検出のためのゲームプレイビデオベンチマークであるTempGlitchを導入する。
• 参考スコア（独自算出の注目度）: 12.71084447285112
• License: http://creativecommons.org/licenses/by-nc-nd/4.0/
• Abstract: Vision-language models (VLMs) are increasingly being explored for video game quality assurance, especially gameplay glitch detection. Most existing evaluations, however, treat glitches as static visual anomalies, asking models to detect failures from a single frame. We argue that this framing misses a key distinction: some glitches are spatial and visible in an isolated frame, whereas others are temporal and become evident only through changes across ordered frames. A preliminary study confirms this gap, showing that temporal glitches are substantially harder for VLMs to detect than spatial ones. To enable systematic evaluation of this underexplored setting, we introduce TempGlitch, a controlled gameplay video benchmark for temporal glitch detection. TempGlitch covers five temporal glitch types with balanced per-category samples, together with paired glitch-free videos that enable reliable binary evaluation. We evaluate 12 proprietary and open-weight VLMs across multiple frame-sampling settings. Our results show that current VLMs remain near chance on TempGlitch, often collapsing into either overly conservative behavior that misses most glitches or overly sensitive behavior that flags clean videos as glitchy. Moreover, denser frame sampling and larger model size do not reliably resolve these failures. TempGlitch provides a focused testbed for temporal reasoning, robust gameplay understanding, and automated glitch detection with VLMs. Code and data are available at the project website.
• Abstract（参考訳）: 視覚言語モデル(VLM)は、ビデオゲームの品質保証、特にゲームプレイグリッチ検出のために研究されている。 しかし、既存のほとんどの評価では、グリッチを静的な視覚異常として扱い、モデルに単一のフレームから障害を検出するように求めている。 我々は、このフレーミングが重要な区別を欠いていると主張している。いくつかのグリッチは孤立したフレームで空間的に見え、他のグリッチは時間的であり、順序付けられたフレーム間の変化によってのみ明らかになる。 予備的な研究では、このギャップが確認されており、VLMが空間的よりも検出するのが極めて難しいことが示されている。 そこで本研究では,時間的グリッチ検出のためのゲームプレイビデオベンチマークであるTempGlitchを導入する。 TempGlitchは、カテゴリごとのバランスの取れた5つの時間的グリッチタイプと、信頼性の高いバイナリ評価を可能にするペア付きグリッチフリービデオをカバーする。 複数のフレームサンプリング設定において,プロプライエタリかつオープンウェイトなVLMを12個評価した。 以上の結果から、現在のVLMはTempGlitchに近づいたままで、ほとんどのグリーチを見逃す過度に保守的な行動と、クリーンなビデオをグリーチとしてフラグ付けする過度に敏感な行動に陥りがちです。 さらに、より高密度なフレームサンプリングとより大きなモデルサイズは、これらの失敗を確実に解決しない。 TempGlitchは、時間的推論、堅牢なゲームプレイ理解、VLMによる自動グリッチ検出のための集中的なテストベッドを提供する。 コードとデータはプロジェクトのWebサイトで公開されている。

関連論文リスト

• RESP: Reference-guided Sequential Prompting for Visual Glitch Detection in Video Games [12.71084447285112]
  視覚言語モデル(VLM)を用いたゲームプレイグリッチ検出のための実用的多フレームフレームワークRESPを提案する。 各テストフレームに対して、同じビデオの早期から参照フレームを選択し、視覚的ベースラインを確立する。 RESPは、VLMを微調整することなく、ノイズの多いフレーム予測を安定したビデオレベル決定に集約する。
  論文  参考訳（メタデータ） (2026-04-13T07:04:15Z)
• How Far Can VLMs Go for Visual Bug Detection? Studying 19,738 Keyframes from 41 Hours of Gameplay Videos [41.46982669196867]
  長めのゲームプレイのためのビデオベースの品質保証(QA)は、労働集約的でエラーを起こしやすい。 近年のベンチマークでは、視覚言語モデル(VLM)は、キュレートされたデータセットの視覚的グリッチの検出において、有望な結果が得られることが示唆されている。
  論文  参考訳（メタデータ） (2026-03-24T01:59:06Z)
• MistExit: Learning to Exit for Early Mistake Detection in Procedural Videos [53.5354731425141]
  ビデオにおける早期誤り検出の課題について紹介する。 本研究の目的は,プロシージャ活動におけるキーステップが,ストリーミング映像を可能な限り少なく観察しながら正しく実行されるかどうかを判断することである。 本稿では,誤り検出と強化学習ポリシを組み合わせた手法を提案する。
  論文  参考訳（メタデータ） (2026-03-15T07:14:49Z)
• VideoHallu: Evaluating and Mitigating Multi-modal Hallucinations on Synthetic Video Understanding [70.00000053847738]
  物理的な世界と対話するAIシステムには、真の視覚的理解が不可欠である。 現在の評価では、主にトレーニングデータと同様の実際のビデオを使用する。 物理的に不可能または論理的に矛盾する事象を描写するビデオを用いた負制御テストを提案する。
  論文  参考訳（メタデータ） (2025-05-02T15:58:38Z)
• MINERVA: Evaluating Complex Video Reasoning [72.12644008002566]
  我々は、最新のマルチモーダルモデルのためのMINERVAと呼ばれる新しいビデオ推論データセットを提供する。 我々のデータセットはマルチモーダルであり、ビデオ領域と長さの点で多様であり、複雑なマルチステップの質問で構成されている。 我々は,様々なモデルにまたがる共通障害モードを特定するために,きめ細かいエラー解析を行い,推論エラーの分類を作成する。
  論文  参考訳（メタデータ） (2025-05-01T17:41:49Z)
• TemporalBench: Benchmarking Fine-grained Temporal Understanding for Multimodal Video Models [75.42002690128486]
  TemporalBenchは、ビデオの微細な時間的理解を評価するための新しいベンチマークだ。 ビデオクリップの時間的ダイナミクスを詳述した2Kの高品質な人間のアノテーションから派生した10KのビデオQ&Aペアで構成されている。 GPT-4oのような最先端のモデルは、TemporalBench上で38.5%の質問応答精度しか達成していない。
  論文  参考訳（メタデータ） (2024-10-14T17:59:58Z)
• GlitchBench: Can large multimodal models detect video game glitches? [6.817358575629576]
  GlitchBenchは、ビデオゲームの品質保証タスクから派生した新しいベンチマークである。 当社のベンチマークは、ビデオゲームの異常なシナリオや派手なシナリオから収集しています。 我々はGlitchBenchが最先端のLMMに新たな課題をもたらすことを示す。
  論文  参考訳（メタデータ） (2023-12-08T18:14:21Z)
• Anomaly detection in surveillance videos using transformer based attention model [3.2968779106235586]
  本研究は、トレーニングビデオにおける異常セグメントの注釈付けを避けるために、弱教師付き戦略を用いることを示唆する。 提案するフレームワークは,実世界のデータセット,すなわちShanghaiTech Campusデータセットで検証される。
  論文  参考訳（メタデータ） (2022-06-03T12:19:39Z)
• Robust Unsupervised Video Anomaly Detection by Multi-Path Frame Prediction [61.17654438176999]
  本稿では,フレーム予測と適切な設計による新規で頑健な非教師付きビデオ異常検出手法を提案する。 提案手法は,CUHK Avenueデータセット上で88.3%のフレームレベルAUROCスコアを得る。
  論文  参考訳（メタデータ） (2020-11-05T11:34:12Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。