論文の概要: Diagnosing Human-object Interaction Detectors
- arxiv url: http://arxiv.org/abs/2308.08529v2
- Date: Fri, 1 Dec 2023 18:57:27 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-04 18:07:41.942177
- Title: Diagnosing Human-object Interaction Detectors
- Title(参考訳): 人物体相互作用検出器の診断
- Authors: Fangrui Zhu, Yiming Xie, Weidi Xie, Huaizu Jiang
- Abstract要約: 本稿では,HOI検出モデルの定量的なブレークダウン解析を行うための診断ツールボックスを提案する。
我々は8つの最先端HOI検出モデルを分析し、今後の研究を促進する貴重な診断洞察を提供する。
- 参考スコア(独自算出の注目度): 42.283857276076596
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We have witnessed significant progress in human-object interaction (HOI)
detection. The reliance on mAP (mean Average Precision) scores as a summary
metric, however, does not provide sufficient insight into the nuances of model
performance (e.g., why one model is better than another), which can hinder
further innovation in this field. To address this issue, in this paper, we
introduce a diagnosis toolbox to provide detailed quantitative break-down
analysis of HOI detection models, inspired by the success of object detection
diagnosis toolboxes. We first conduct holistic investigations in the pipeline
of HOI detection. By defining a set of errors and the oracles to fix each of
them, we can have a quantitative analysis of the significance of different
errors according to the mAP improvement obtained from fixing each error. We
then delve into two sub-tasks of HOI detection: human-object pair detection and
interaction classification, respectively. For the first detection task, we
compute the coverage of ground-truth human-object pairs as well as the
noisiness level in the detection results. For the second classification task,
we measure a model's performance of differentiating positive and negative
detection results and also classifying the actual interactions when the
human-object pairs are correctly detected. We analyze eight state-of-the-art
HOI detection models and provide valuable diagnosis insights to foster future
research. For instance, our diagnosis shows that state-of-the-art model RLIPv2
outperforms others mainly because it significantly improves the multi-label
interaction classification accuracy. Our toolbox is applicable for different
methods across different datasets and available at
https://github.com/neu-vi/Diag-HOI.
- Abstract(参考訳): 我々は,人-物間相互作用(HOI)の検出の著しい進歩を目撃した。
しかし、mAP(平均精度)への依存は、モデル性能のニュアンス(例えば、あるモデルが他のモデルよりも優れている理由)についての十分な洞察を与えていないため、この分野のさらなる革新を妨げる可能性がある。
この問題に対処するため,本論文では,オブジェクト検出ツールボックスの成功に触発されて,HOI検出モデルの詳細なブレークダウン分析を行うための診断ツールボックスを提案する。
HOI検出のパイプラインにおいて、まず全体論的調査を行う。
エラーの集合と各エラーを修正するためのオラクルを定義することで、各エラーの修正から得られたmAP改善に応じて、異なるエラーの意義を定量的に分析することができる。
次に,人間の対象対検出と相互作用分類という,HOI検出の2つのサブタスクを探索した。
第1検出タスクでは,検出結果のノイズレベルだけでなく,接地構造と対象のペアのカバレッジも計算する。
第2の分類タスクでは、正と負の区別結果のモデルの性能を測定し、人間と対象のペアが正しく検出されたときに実際の相互作用を分類する。
最先端のhoi検出モデル8種を解析し,今後の研究のために有用な診断知見を提供する。
例えば,最先端モデルRLIPv2は,多言語間相互作用の分類精度を大幅に向上させるため,他よりも優れていた。
当社のツールボックスは、さまざまなデータセットにまたがるさまざまなメソッドに適用可能で、https://github.com/neu-vi/diag-hoiで利用可能です。
関連論文リスト
- Systematic Review: Anomaly Detection in Connected and Autonomous Vehicles [0.0]
この系統的なレビューは、連結車両と自律車両の異常検出に焦点を当てている。
異常検出に最もよく使用される人工知能(AI)アルゴリズムは、LSTM、CNN、オートエンコーダなどのニューラルネットワークと1クラスのSVMである。
自動車への異常検出の展開を調査し,道路上での性能評価を行うためには,今後の研究が必要である。
論文 参考訳(メタデータ) (2024-05-04T18:31:38Z) - Learning Feature Inversion for Multi-class Anomaly Detection under General-purpose COCO-AD Benchmark [101.23684938489413]
異常検出(AD)は、しばしば産業品質検査や医学的病変検査のための異常の検出に焦点が当てられている。
この研究はまず、COCOをADフィールドに拡張することにより、大規模で汎用的なCOCO-ADデータセットを構築する。
セグメンテーション分野のメトリクスにインスパイアされた我々は、より実用的なしきい値に依存したAD固有のメトリクスをいくつか提案する。
論文 参考訳(メタデータ) (2024-04-16T17:38:26Z) - Diagnosing Errors in Video Relation Detectors [46.792264699927436]
ビデオ関係検出は、コンピュータビジョンにおいて新しくて困難な問題を形成する。
全体的なパフォーマンスはいまだに限界があり、その問題を解決する上で重要な要素が何であるかは不明だ。
本稿では,検出エラーの原因を分析する診断ツールを提案する。
論文 参考訳(メタデータ) (2021-10-25T17:04:08Z) - Confidence-based Out-of-Distribution Detection: A Comparative Study and
Analysis [17.398553230843717]
我々は、信頼度に基づくOOD検出のための様々な最先端手法の能力を評価する。
まず,コンピュータビジョンベンチマークを用いて複数のOOD検出手法を再現・比較する。
次に,胸部X線を用いた疾患分類の課題に対して,その能力を評価する。
論文 参考訳(メタデータ) (2021-07-06T12:10:09Z) - Attack-agnostic Adversarial Detection on Medical Data Using Explainable
Machine Learning [0.0]
本論文では,2つのデータセット上での対比サンプルの正確な検出のためのモデル非依存説明性に基づく手法を提案する。
MIMIC-IIIとHenan-Renmin EHRのデータセットでは,縦軸攻撃に対する検出精度は77%であった。
MIMIC-CXRデータセットでは88%の精度を実現し、すべての設定において、両方のデータセットにおける敵検出技術の現状を10%以上改善した。
論文 参考訳(メタデータ) (2021-05-05T10:01:53Z) - Meta-learning One-class Classifiers with Eigenvalue Solvers for
Supervised Anomaly Detection [55.888835686183995]
教師付き異常検出のためのニューラルネットワークに基づくメタラーニング手法を提案する。
提案手法は,既存の異常検出法や少数ショット学習法よりも優れた性能を実現することを実験的に実証した。
論文 参考訳(メタデータ) (2021-03-01T01:43:04Z) - DecAug: Augmenting HOI Detection via Decomposition [54.65572599920679]
現在のアルゴリズムでは、データセット内のトレーニングサンプルやカテゴリの不均衡が不足している。
本稿では,HOI検出のためのDECAugと呼ばれる効率的かつ効率的なデータ拡張手法を提案する。
実験の結果,V-COCOおよびHICODETデータセットの3.3mAPと1.6mAPの改善が得られた。
論文 参考訳(メタデータ) (2020-10-02T13:59:05Z) - DRG: Dual Relation Graph for Human-Object Interaction Detection [65.50707710054141]
人-物間相互作用(HOI)検出の課題に対処する。
既存の方法は、人間と物体の対の相互作用を独立に認識するか、複雑な外観に基づく共同推論を行う。
本稿では,抽象的空間意味表現を活用して,各対象対を記述し,二重関係グラフを用いてシーンの文脈情報を集約する。
論文 参考訳(メタデータ) (2020-08-26T17:59:40Z) - An Extensive Study on Cross-Dataset Bias and Evaluation Metrics
Interpretation for Machine Learning applied to Gastrointestinal Tract
Abnormality Classification [2.985964157078619]
GI領域における疾患の自動解析は、コンピュータ科学や医学関連雑誌でホットな話題となっている。
クロスデータセットによる評価指標と機械学習モデルの明確な理解は、この分野の研究を新たな品質レベルに導くために不可欠である。
16種類のGIトラクタ条件を分類できる5つの異なる機械学習モデルの包括的評価を行う。
論文 参考訳(メタデータ) (2020-05-08T08:59:31Z) - Stance Detection Benchmark: How Robust Is Your Stance Detection? [65.91772010586605]
Stance Detection (StD) は、あるトピックやクレームに対する著者の姿勢を検出することを目的としている。
マルチデータセット学習環境において、さまざまなドメインの10のStDデータセットから学習するStDベンチマークを導入する。
このベンチマーク設定では、5つのデータセットに新しい最先端結果を表示することができます。
論文 参考訳(メタデータ) (2020-01-06T13:37:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。