論文の概要: Forward Composition Propagation for Explainable Neural Reasoning
- arxiv url: http://arxiv.org/abs/2112.12717v4
- Date: Tue, 24 Oct 2023 22:10:17 GMT
- ステータス: 処理完了
- システム内更新日: 2023-10-28 07:05:57.189067
- Title: Forward Composition Propagation for Explainable Neural Reasoning
- Title(参考訳): 説明可能なニューラル推論のための前方構成伝搬
- Authors: Isel Grau and Gonzalo N\'apoles and Marilyn Bello and Yamisleydi
Salgueiro and Agnieszka Jastrzebska
- Abstract要約: 本稿では,階層型分類問題に対するフィードフォワードニューラルネットワークの予測について説明するアルゴリズムを提案する。
提案したFCPアルゴリズムでは、各ニューロンは、そのニューロンにおける各問題の特徴の役割を示す合成ベクトルによって記述される。
本稿では, 基底真理が知られている公平問題において, バイアス検出に関するケーススタディを開発する。
- 参考スコア(独自算出の注目度): 3.4123736336071864
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: This paper proposes an algorithm called Forward Composition Propagation (FCP)
to explain the predictions of feed-forward neural networks operating on
structured classification problems. In the proposed FCP algorithm, each neuron
is described by a composition vector indicating the role of each problem
feature in that neuron. Composition vectors are initialized using a given input
instance and subsequently propagated through the whole network until reaching
the output layer. The sign of each composition value indicates whether the
corresponding feature excites or inhibits the neuron, while the absolute value
quantifies its impact. The FCP algorithm is executed on a post-hoc basis, i.e.,
once the learning process is completed. Aiming to illustrate the FCP algorithm,
this paper develops a case study concerning bias detection in a fairness
problem in which the ground truth is known. The simulation results show that
the composition values closely align with the expected behavior of protected
features. The source code and supplementary material for this paper are
available at https://github.com/igraugar/fcp.
- Abstract(参考訳): 本稿では,構造的分類問題に基づくフィードフォワードニューラルネットワークの予測を説明するため,fcp( forward composition propagation)と呼ばれるアルゴリズムを提案する。
提案するfcpアルゴリズムでは、各ニューロンは、そのニューロンにおける各問題の特徴の役割を示す合成ベクターによって記述される。
構成ベクトルは与えられた入力インスタンスを使用して初期化され、出力層に到達するまでネットワーク全体に伝播する。
各構成値の符号は、対応する特徴がニューロンを興奮させるか阻害するかを示し、絶対値はその影響を定量化する。
FCPアルゴリズムは、学習プロセスが完了すると、ポストホックベースで実行される。
本稿では,fcpアルゴリズムを説明することを目的として,根拠真理が分かっている公平性問題におけるバイアス検出に関するケーススタディを開発した。
シミュレーションの結果, 構成値は保護特徴の期待挙動と密接に一致することがわかった。
この論文のソースコードと補足資料はhttps://github.com/igraugar/fcp.comで入手できる。
関連論文リスト
- The Cascaded Forward Algorithm for Neural Network Training [61.06444586991505]
本稿では,ニューラルネットワークのための新しい学習フレームワークであるCascaded Forward(CaFo)アルゴリズムを提案する。
FFとは異なり、我々のフレームワークは各カスケードブロックのラベル分布を直接出力する。
我々のフレームワークでは、各ブロックは独立して訓練できるので、並列加速度システムに容易に展開できる。
論文 参考訳(メタデータ) (2023-03-17T02:01:11Z) - Unsupervised Learning of Initialization in Deep Neural Networks via
Maximum Mean Discrepancy [74.34895342081407]
本稿では,入力データに対する優れた初期化を求めるための教師なしアルゴリズムを提案する。
まず、パラメータ空間における各パラメータ構成が、d-way分類の特定の下流タスクに対応することに気付く。
次に、学習の成功は、初期パラメータの近傍で下流タスクがいかに多様であるかに直接関連していると推測する。
論文 参考訳(メタデータ) (2023-02-08T23:23:28Z) - The Predictive Forward-Forward Algorithm [79.07468367923619]
本稿では,ニューラルネットワークにおける信頼割当を行うための予測フォワード(PFF)アルゴリズムを提案する。
我々は,有向生成回路と表現回路を同時に同時に学習する,新しい動的リカレントニューラルネットワークを設計する。
PFFは効率よく学習し、学習信号を伝達し、フォワードパスのみでシナプスを更新する。
論文 参考訳(メタデータ) (2023-01-04T05:34:48Z) - Credit Assignment for Trained Neural Networks Based on Koopman Operator
Theory [3.130109807128472]
ニューラルネットワークのクレジット割り当て問題は、最終的な出力に対する各ネットワークコンポーネントのクレジットを評価することを指す。
本稿では,ニューラルネットワークの信頼割当問題に対する線形力学の代替的視点について述べる。
典型的なニューラルネットワークを用いた実験により,提案手法の有効性が示された。
論文 参考訳(メタデータ) (2022-12-02T06:34:27Z) - Deep Learning with a Classifier System: Initial Results [0.0]
本稿では,ディープニューラルネットワークを用いた適応計算が可能な学習分類器システムを用いた最初の結果を示す。
最大予測誤差を達成した後、性能を維持しつつ、重みとユニットの数を自動で削減する。
論文 参考訳(メタデータ) (2021-03-01T16:40:12Z) - Vector-output ReLU Neural Network Problems are Copositive Programs:
Convex Analysis of Two Layer Networks and Polynomial-time Algorithms [29.975118690758126]
2層ベクトル無限ReLUニューラルネットワークトレーニング問題の半出力グローバル双対について述べる。
特定の問題のクラスに対して正確であることが保証されるソリューションを提供する。
論文 参考訳(メタデータ) (2020-12-24T17:03:30Z) - Activation Relaxation: A Local Dynamical Approximation to
Backpropagation in the Brain [62.997667081978825]
活性化緩和(AR)は、バックプロパゲーション勾配を力学系の平衡点として構成することで動機付けられる。
我々のアルゴリズムは、正しいバックプロパゲーション勾配に迅速かつ堅牢に収束し、単一のタイプの計算単位しか必要とせず、任意の計算グラフで操作できる。
論文 参考訳(メタデータ) (2020-09-11T11:56:34Z) - Revisiting Initialization of Neural Networks [72.24615341588846]
ヘッセン行列のノルムを近似し, 制御することにより, 層間における重みのグローバルな曲率を厳密に推定する。
Word2Vec と MNIST/CIFAR 画像分類タスクの実験により,Hessian ノルムの追跡が診断ツールとして有用であることが確認された。
論文 参考訳(メタデータ) (2020-04-20T18:12:56Z) - Backprojection for Training Feedforward Neural Networks in the Input and
Feature Spaces [12.323996999894002]
本稿では,バックプロパゲーションよりもかなり高速なフィードフォワードニューラルネットワークのトレーニングアルゴリズムを提案する。
提案アルゴリズムは、それぞれバックプロジェクションとカーネルバックプロジェクションと呼ばれる入力空間と特徴空間の両方に利用できる。
論文 参考訳(メタデータ) (2020-04-05T20:53:11Z) - MSE-Optimal Neural Network Initialization via Layer Fusion [68.72356718879428]
ディープニューラルネットワークは、さまざまな分類と推論タスクに対して最先端のパフォーマンスを達成する。
グラデーションと非進化性の組み合わせは、学習を新しい問題の影響を受けやすいものにする。
確率変数を用いて学習した深層ネットワークの近傍層を融合する手法を提案する。
論文 参考訳(メタデータ) (2020-01-28T18:25:15Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。