論文の概要: Loss Function Discovery for Object Detection via Convergence-Simulation
Driven Search
- arxiv url: http://arxiv.org/abs/2102.04700v1
- Date: Tue, 9 Feb 2021 08:34:52 GMT
- ステータス: 処理完了
- システム内更新日: 2021-02-10 15:13:54.540196
- Title: Loss Function Discovery for Object Detection via Convergence-Simulation
Driven Search
- Title(参考訳): 収束シミュレート駆動探索による物体検出のためのロス関数探索
- Authors: Peidong Liu, Gengwei Zhang, Bochao Wang, Hang Xu, Xiaodan Liang, Yong
Jiang, Zhenguo Li
- Abstract要約: 本稿では,効率的な収束シミュレーションによる進化的探索アルゴリズムCSE-Autolossを提案する。
一般的な検出器上での損失関数探索の広範囲な評価を行い、探索された損失の優れた一般化能力を検証した。
実験の結果, 2段検出器と1段検出器のmAPでは, 最適損失関数の組み合わせが1.1%と0.8%を上回っていることがわかった。
- 参考スコア(独自算出の注目度): 101.73248560009124
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Designing proper loss functions for vision tasks has been a long-standing
research direction to advance the capability of existing models. For object
detection, the well-established classification and regression loss functions
have been carefully designed by considering diverse learning challenges.
Inspired by the recent progress in network architecture search, it is
interesting to explore the possibility of discovering new loss function
formulations via directly searching the primitive operation combinations. So
that the learned losses not only fit for diverse object detection challenges to
alleviate huge human efforts, but also have better alignment with evaluation
metric and good mathematical convergence property. Beyond the previous
auto-loss works on face recognition and image classification, our work makes
the first attempt to discover new loss functions for the challenging object
detection from primitive operation levels. We propose an effective
convergence-simulation driven evolutionary search algorithm, called
CSE-Autoloss, for speeding up the search progress by regularizing the
mathematical rationality of loss candidates via convergence property
verification and model optimization simulation. CSE-Autoloss involves the
search space that cover a wide range of the possible variants of existing
losses and discovers best-searched loss function combination within a short
time (around 1.5 wall-clock days). We conduct extensive evaluations of loss
function search on popular detectors and validate the good generalization
capability of searched losses across diverse architectures and datasets. Our
experiments show that the best-discovered loss function combinations outperform
default combinations by 1.1% and 0.8% in terms of mAP for two-stage and
one-stage detectors on COCO respectively. Our searched losses are available at
https://github.com/PerdonLiu/CSE-Autoloss.
- Abstract(参考訳): ビジョンタスクのための適切な損失関数の設計は、既存のモデルの能力を促進するための長年の研究方向であった。
オブジェクト検出では,学習課題の多種多様を考慮した分類と回帰損失関数が慎重に設計されている。
ネットワークアーキテクチャ検索の最近の進歩に触発されて、プリミティブ操作の組み合わせを直接検索することで、新しい損失関数の定式化を発見できる可能性を探ることが興味深い。
そのため、学習した損失は、巨大な人間の努力を和らげる様々な物体検出課題に適合するだけでなく、評価メトリックと優れた数学的収束特性との整合性も向上する。
これまでの顔認識と画像分類に関するオートロス以外にも,プリミティブな操作レベルから課題となる物体検出のための新たな損失関数を初めて発見する試みを行っている。
CSE-Autoloss と呼ばれる効果的な収束シミュレーション駆動進化探索アルゴリズムを提案し、収束特性検証とモデル最適化シミュレーションにより、損失候補の数学的合理性を正規化することで検索の進捗を高速化します。
CSE-Autolossは、既存の損失の様々なバリエーションをカバーする検索空間を包含し、短い時間(約1.5ウォールクロック日)で最良の損失関数の組み合わせを発見する。
ポピュラーディテクタにおける損失関数探索の広範な評価を行い、多様なアーキテクチャやデータセットにわたる探索損失の良好な一般化能力を検証します。
実験の結果,COCO上の2段検出器と1段検出器のmAPにおいて,最適損失関数の組み合わせは1.1%,0.8%を上回った。
検索した損失はhttps://github.com/PerdonLiu/CSE-Autoloss.comで確認できる。
関連論文リスト
- Next Generation Loss Function for Image Classification [0.0]
我々は、遺伝的プログラミング(GP)アプローチを利用して、クロスエントロピー(CE)損失を含むよく知られた損失関数に挑戦する。
NGL(Next Generation Loss)と呼ばれる1つの関数は、テストされたすべてのデータセットで、同じか、より優れたパフォーマンスを示している。
論文 参考訳(メタデータ) (2024-04-19T15:26:36Z) - Fast and Efficient Local Search for Genetic Programming Based Loss
Function Learning [12.581217671500887]
本稿では,タスクとモデルに依存しない損失関数学習のためのメタラーニングフレームワークを提案する。
その結果, 学習した損失関数は, 収束性, サンプル効率, グラフ化, コンピュータビジョン, 自然言語処理問題に対する推論性能の向上をもたらすことがわかった。
論文 参考訳(メタデータ) (2024-03-01T02:20:04Z) - Spatial Coherence Loss: All Objects Matter in Salient and Camouflaged Object Detection [3.03995893427722]
正確な意味分析を行うには、学習のどの段階でも現れる全てのオブジェクトレベルの予測を学習する必要がある。
本稿では,隣接画素間の相互応答を広範に使用する単一応答損失関数に組み込んだ新しい損失関数である空間コヒーレンス損失(SCLoss)を提案する。
論文 参考訳(メタデータ) (2024-02-28T20:27:49Z) - AutoLoss-Zero: Searching Loss Functions from Scratch for Generic Tasks [78.27036391638802]
AutoLoss-Zeroは、ジェネリックタスクのスクラッチから損失関数を検索する最初のフレームワークである。
探索効率を向上させるために、損失低減プロトコルと勾配等価性チェック戦略を開発する。
様々なコンピュータビジョンタスクにおける実験により、検索損失関数は既存の損失関数と同等かそれ以上かが示されている。
論文 参考訳(メタデータ) (2021-03-25T17:59:09Z) - Progressive Self-Guided Loss for Salient Object Detection [102.35488902433896]
画像中の深層学習に基づくサラエント物体検出を容易にするプログレッシブ自己誘導損失関数を提案する。
我々のフレームワークは適応的に集約されたマルチスケール機能を利用して、健全な物体の探索と検出を効果的に行う。
論文 参考訳(メタデータ) (2021-01-07T07:33:38Z) - Auto Seg-Loss: Searching Metric Surrogates for Semantic Segmentation [56.343646789922545]
そこで本研究では,各計量に対する相異なるサロゲート損失を探索することにより,計量固有損失関数の設計を自動化することを提案する。
PASCAL VOCとCityscapesの実験では、探索されたサロゲート損失は手動で設計した損失関数よりも優れていた。
論文 参考訳(メタデータ) (2020-10-15T17:59:08Z) - Loss Function Search for Face Recognition [75.79325080027908]
最適な候補を自動的に獲得する報酬誘導探索法を開発した。
種々の顔認証ベンチマークの実験結果から,本手法の有効性が示された。
論文 参考訳(メタデータ) (2020-07-10T03:40:10Z) - AutoOD: Automated Outlier Detection via Curiosity-guided Search and
Self-imitation Learning [72.99415402575886]
外乱検出は重要なデータマイニングの課題であり、多くの実用的応用がある。
本稿では,最適なニューラルネットワークモデルを探すことを目的とした自動外乱検出フレームワークであるAutoODを提案する。
さまざまな実世界のベンチマークデータセットに対する実験結果から、AutoODが特定したディープモデルが最高のパフォーマンスを達成することが示された。
論文 参考訳(メタデータ) (2020-06-19T18:57:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。