論文の概要: Contextual Interference Reduction by Selective Fine-Tuning of Neural
Networks
- arxiv url: http://arxiv.org/abs/2011.10857v1
- Date: Sat, 21 Nov 2020 20:11:12 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-22 23:23:11.695961
- Title: Contextual Interference Reduction by Selective Fine-Tuning of Neural
Networks
- Title(参考訳): ニューラルネットワークの選択的微調整による文脈干渉低減
- Authors: Mahdi Biparva, John Tsotsos
- Abstract要約: 本研究では,不整合前景対象オブジェクト表現の干渉におけるコンテキストの役割について検討する。
私たちはボトムアップとトップダウンの処理パラダイムの恩恵を受けるフレームワークに取り組んでいます。
- 参考スコア(独自算出の注目度): 1.0152838128195465
- License: http://creativecommons.org/licenses/by-nc-sa/4.0/
- Abstract: Feature disentanglement of the foreground target objects and the background
surrounding context has not been yet fully accomplished. The lack of network
interpretability prevents advancing for feature disentanglement and better
generalization robustness. We study the role of the context on interfering with
a disentangled foreground target object representation in this work. We
hypothesize that the representation of the surrounding context is heavily tied
with the foreground object due to the dense hierarchical parametrization of
convolutional networks with under-constrained learning algorithms. Working on a
framework that benefits from the bottom-up and top-down processing paradigms,
we investigate a systematic approach to shift learned representations in
feedforward networks from the emphasis on the irrelevant context to the
foreground objects. The top-down processing provides importance maps as the
means of the network internal self-interpretation that will guide the learning
algorithm to focus on the relevant foreground regions towards achieving a more
robust representations. We define an experimental evaluation setup with the
role of context emphasized using the MNIST dataset. The experimental results
reveal not only that the label prediction accuracy is improved but also a
higher degree of robustness to the background perturbation using various noise
generation methods is obtained.
- Abstract(参考訳): 前景のターゲットオブジェクトと背景の背景との特徴の絡み合いは、まだ完全には達成されていない。
ネットワーク解釈性の欠如により、特徴の絡み合いや一般化の堅牢性が向上する。
本研究では,不整合前景対象オブジェクト表現の干渉におけるコンテキストの役割について検討する。
我々は,畳み込みネットワークと学習アルゴリズムの密集した階層的パラメトリゼーションにより,周囲の文脈の表現が前景オブジェクトと強く結びついていると仮定する。
ボトムアップおよびトップダウン処理パラダイムの利点を生かしたフレームワークに取り組んで、フィードフォワードネットワークにおける学習された表現を、無関係なコンテキストから前景オブジェクトへとシフトするための体系的なアプローチを検討する。
トップダウン処理は、学習アルゴリズムが関連する前景領域に集中し、より堅牢な表現を達成するためのネットワーク内自己解釈の手段として重要マップを提供する。
mnistデータセットを用いて,コンテキスト強調の役割を持つ実験的な評価設定を定義する。
実験の結果, ラベル予測精度が向上するだけでなく, 様々な雑音発生法を用いて背景摂動に対する強靭性が向上することが明らかとなった。
関連論文リスト
- Deep Semantic Statistics Matching (D2SM) Denoising Network [70.01091467628068]
本稿では,Deep Semantic Statistics Matching (D2SM) Denoising Networkを紹介する。
事前訓練された分類ネットワークの意味的特徴を利用して、意味的特徴空間における明瞭な画像の確率的分布と暗黙的に一致させる。
識別画像のセマンティックな分布を学習することで,ネットワークの認知能力を大幅に向上させることを実証的に見出した。
論文 参考訳(メタデータ) (2022-07-19T14:35:42Z) - USegScene: Unsupervised Learning of Depth, Optical Flow and Ego-Motion
with Semantic Guidance and Coupled Networks [31.600708674008384]
UegSceneは、ステレオカメラ画像の奥行き、光学的流れ、エゴモーション推定を意味的に導くためのフレームワークである。
一般的なKITTIデータセットを用いて,提案手法が他の手法よりも大きなマージンで優れていることを示す。
論文 参考訳(メタデータ) (2022-07-15T13:25:47Z) - CoDo: Contrastive Learning with Downstream Background Invariance for
Detection [10.608660802917214]
下流背景不変性(CoDo)を用いたコントラスト学習という,オブジェクトレベルの自己教師型学習手法を提案する。
プリテキストタスクは、さまざまなバックグラウンド、特に下流データセットのインスタンス位置モデリングに集中するように変換される。
MSCOCOの実験では、共通のバックボーンを持つCoDoであるResNet50-FPNが、オブジェクト検出に強力な転送学習結果をもたらすことを示した。
論文 参考訳(メタデータ) (2022-05-10T01:26:15Z) - Learning a Domain-Agnostic Visual Representation for Autonomous Driving
via Contrastive Loss [25.798361683744684]
ドメイン認識コントラスト学習(Domain-Agnostic Contrastive Learning、DACL)は、2段階の非監視ドメイン適応フレームワークである。
提案手法は,従来の最新手法に比べ,単眼深度推定作業における性能向上を実現した。
論文 参考訳(メタデータ) (2021-03-10T07:06:03Z) - Variational Structured Attention Networks for Deep Visual Representation
Learning [49.80498066480928]
空間的注意マップとチャネル的注意の両方を原則的に共同学習するための統合的深層フレームワークを提案する。
具体的には,確率的表現学習フレームワークに注目度の推定と相互作用を統合する。
ニューラルネットワーク内で推論ルールを実装し,確率パラメータとcnnフロントエンドパラメータのエンドツーエンド学習を可能にする。
論文 参考訳(メタデータ) (2021-03-05T07:37:24Z) - Context Decoupling Augmentation for Weakly Supervised Semantic
Segmentation [53.49821324597837]
微調整されたセマンティックセグメンテーションは、近年深く研究されている困難な問題です。
本稿では、オブジェクトが現れる固有のコンテキストを変更する Context Decoupling Augmentation (CDA) メソッドを紹介します。
提案手法の有効性を検証するため, PASCAL VOC 2012データセットにいくつかの代替ネットワークアーキテクチャを用いた広範な実験を行い, CDAが様々なWSSS手法を新たな最先端技術に拡張できることを実証した。
論文 参考訳(メタデータ) (2021-03-02T15:05:09Z) - Anomaly Detection on Attributed Networks via Contrastive Self-Supervised
Learning [50.24174211654775]
本論文では,アトリビュートネットワーク上の異常検出のためのコントラスト型自己監視学習フレームワークを提案する。
このフレームワークは、新しいタイプのコントラストインスタンスペアをサンプリングすることで、ネットワークデータからのローカル情報を完全に活用します。
高次元特性と局所構造から情報埋め込みを学習するグラフニューラルネットワークに基づくコントラスト学習モデルを提案する。
論文 参考訳(メタデータ) (2021-02-27T03:17:20Z) - Learning Connectivity of Neural Networks from a Topological Perspective [80.35103711638548]
本稿では,ネットワークを解析のための完全なグラフに表現するためのトポロジ的視点を提案する。
接続の規模を反映したエッジに学習可能なパラメータを割り当てることにより、学習プロセスを異なる方法で行うことができる。
この学習プロセスは既存のネットワークと互換性があり、より大きな検索空間と異なるタスクへの適応性を持っている。
論文 参考訳(メタデータ) (2020-08-19T04:53:31Z) - Deep Semantic Matching with Foreground Detection and Cycle-Consistency [103.22976097225457]
深層ネットワークに基づく弱い教師付きセマンティックマッチングに対処する。
本研究では,背景乱れの影響を抑えるために,前景領域を明示的に推定する。
複数の画像にまたがって予測変換を強制し、幾何的に可視かつ一貫したサイクル一貫性の損失を発生させる。
論文 参考訳(メタデータ) (2020-03-31T22:38:09Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。