論文の概要: Assessing the applicability of common performance metrics for real-world
infrared small-target detection
- arxiv url: http://arxiv.org/abs/2301.03796v1
- Date: Tue, 10 Jan 2023 05:40:28 GMT
- ステータス: 処理完了
- システム内更新日: 2023-01-11 16:56:20.763472
- Title: Assessing the applicability of common performance metrics for real-world
infrared small-target detection
- Title(参考訳): 実世界赤外小ターゲット検出における共通性能指標の適用性の評価
- Authors: Saed Moradi, Alireza Memarmoghadam, Payman Moallem, Mohamad Farzan
Sabahi
- Abstract要約: 赤外線小目標検出(IRSTD)はコンピュータビジョンにおいて難しい課題である。
新しいアルゴリズムの設計の大幅な改善にもかかわらず、評価指標の広範な調査が欠如していることは明らかである。
本稿では,共通指標の欠点に対処する新しい評価指標を提案する。
- 参考スコア(独自算出の注目度): 2.315976525788139
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Infrared small target detection (IRSTD) is a challenging task in computer
vision. During the last two decades, researchers' efforts are devoted to
improving detection ability of IRSTDs. Despite the huge improvement in
designing new algorithms, lack of extensive investigation of the evaluation
metrics are evident. Therefore, in this paper, a systematic approach is
utilized to: First, investigate the evaluation ability of current metrics;
Second, propose new evaluation metrics to address shortcoming of common
metrics. To this end, after carefully reviewing the problem, the required
conditions to have a successful detection are analyzed. Then, the shortcomings
of current evaluation metrics which include pre-thresholding as well as
post-thresholding metrics are determined. Based on the requirements of
real-world systems, new metrics are proposed. Finally, the proposed metrics are
used to compare and evaluate four well-known small infrared target detection
algorithms. The results show that new metrics are consistent with qualitative
results.
- Abstract(参考訳): 赤外線小目標検出(IRSTD)はコンピュータビジョンにおいて難しい課題である。
過去20年間で、研究者の努力はIRSTDの検出能力の向上に向けられている。
新しいアルゴリズムの設計が大幅に改善されたにもかかわらず、評価指標の広範囲な調査の欠如は明らかである。
そこで本研究では,まず,現在のメトリクスの評価能力について検討し,次に,共通メトリクスの欠点に対処するための新しい評価指標を提案する。
このために、問題を慎重に検討した後、検出に成功するために必要な条件を解析する。
そして、thresholdingとpost-thresholdingメトリックを含む現在の評価メトリクスの欠点を判定する。
実世界のシステム要件に基づいて,新しいメトリクスを提案する。
最後に,提案手法を用いて,既知の4つの小型赤外線ターゲット検出アルゴリズムを比較し,評価する。
その結果、新しい指標は定性的な結果と一致していることがわかった。
関連論文リスト
- A Study of Unsupervised Evaluation Metrics for Practical and Automatic
Domain Adaptation [15.728090002818963]
教師なしドメイン適応(UDA)メソッドは、ラベルなしでターゲットドメインへのモデル転送を容易にする。
本稿では,対象の検証ラベルにアクセスすることなく,移動モデルの品質を評価できる評価指標を見つけることを目的とする。
論文 参考訳(メタデータ) (2023-08-01T05:01:05Z) - Beyond AUROC & co. for evaluating out-of-distribution detection
performance [50.88341818412508]
安全(r)AIとの関連性を考えると,OOD検出法の比較の基礎が実用的ニーズと整合しているかどうかを検討することが重要である。
我々は,IDとOODの分離が不十分なことを明示する新しい指標であるAUTC(Area Under the Threshold Curve)を提案する。
論文 参考訳(メタデータ) (2023-06-26T12:51:32Z) - SoftED: Metrics for Soft Evaluation of Time Series Event Detection [5.6649966964761855]
時系列イベント検出法は,検出精度にのみ焦点をあてた標準分類基準によって評価される。
事象を検出する不正確さは、しばしば、隣り合う検出に反映される先行または遅延効果によって生じる。
本稿では,イベント検出手法のソフトアセスメントのために設計された,新しいメトリクスセットであるSoftEDメトリクスを紹介する。
論文 参考訳(メタデータ) (2023-04-02T03:27:31Z) - One-Stage Cascade Refinement Networks for Infrared Small Target
Detection [21.28595135499812]
SIRST(Single-frame InfraRed Small Target)検出は、固有の特性の欠如による課題である。
実世界の高解像度単一フレームターゲットのSIRST-V2データセットからなる赤外線小ターゲット検出のための新しい研究ベンチマークを提案する。
論文 参考訳(メタデータ) (2022-12-16T13:37:23Z) - Benchmarking Node Outlier Detection on Graphs [90.29966986023403]
グラフの外れ値検出は、多くのアプリケーションにおいて、新しいが重要な機械学習タスクである。
UNODと呼ばれるグラフに対して、最初の包括的教師なしノード外乱検出ベンチマークを示す。
論文 参考訳(メタデータ) (2022-06-21T01:46:38Z) - Large-Scale Sequential Learning for Recommender and Engineering Systems [91.3755431537592]
本稿では,現在の状況に適応してパーソナライズされたランキングを提供する自動アルゴリズムの設計に焦点を当てる。
前者はSAROSと呼ばれる新しいアルゴリズムを提案し,インタラクションの順序を学習するためのフィードバックの種類を考慮に入れている。
提案手法は, 電力網の故障検出に対する初期アプローチと比較して, 統計的に有意な結果を示す。
論文 参考訳(メタデータ) (2022-05-13T21:09:41Z) - Re-Examining System-Level Correlations of Automatic Summarization
Evaluation Metrics [64.81682222169113]
システムレベルの相関により, 要約品質の人的判断を再現する自動要約評価指標を確実に定量化する。
システムレベルの相関の定義が、実際にシステムを評価するためにメトリクスがどのように使われているかと矛盾する2つの方法を特定する。
論文 参考訳(メタデータ) (2022-04-21T15:52:14Z) - GO FIGURE: A Meta Evaluation of Factuality in Summarization [131.1087461486504]
本稿では,現実性評価指標を評価するメタ評価フレームワークGO FIGUREを紹介する。
10個の実測値のベンチマーク分析により、我々のフレームワークが堅牢で効率的な評価を提供することが明らかとなった。
また、QAメトリクスは、ドメイン間の事実性を測定する標準的なメトリクスよりも一般的に改善されているが、パフォーマンスは、質問を生成する方法に大きく依存していることも明らかにしている。
論文 参考訳(メタデータ) (2020-10-24T08:30:20Z) - PONE: A Novel Automatic Evaluation Metric for Open-Domain Generative
Dialogue Systems [48.99561874529323]
オープンドメイン生成対話システムの評価には3つの方法がある。
体系的な比較が欠如しているため、どの指標がより効果的であるかは明らかでない。
本稿では,人間の判断との相関性を大幅に改善できる,新しい,実現可能な学習基準を提案する。
論文 参考訳(メタデータ) (2020-04-06T04:36:33Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。