論文の概要: Stable neural networks and connections to continuous dynamical systems
- arxiv url: http://arxiv.org/abs/2510.22299v1
- Date: Sat, 25 Oct 2025 14:00:03 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-10-28 15:28:15.090777
- Title: Stable neural networks and connections to continuous dynamical systems
- Title(参考訳): 安定ニューラルネットワークと連続力学系への接続
- Authors: Matthias J. Ehrhardt, Davide Murari, Ferdia Sherry,
- Abstract要約: この研究は、ニューラルネットワークの安定性を理解し、強化することに焦点を当てている。
この分野の既存の作業の多くを支えている基本的な概念を特定し、記述する。
読者が適応し拡張できるアプローチを実装するコードを提供します。
- 参考スコア(独自算出の注目度): 0.7136933021609076
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The existence of instabilities, for example in the form of adversarial examples, has given rise to a highly active area of research concerning itself with understanding and enhancing the stability of neural networks. We focus on a popular branch within this area which draws on connections to continuous dynamical systems and optimal control, giving a bird's eye view of this area. We identify and describe the fundamental concepts that underlie much of the existing work in this area. Following this, we go into more detail on a specific approach to designing stable neural networks, developing the theoretical background and giving a description of how these networks can be implemented. We provide code that implements the approach that can be adapted and extended by the reader. The code further includes a notebook with a fleshed-out toy example on adversarial robustness of image classification that can be run without heavy requirements on the reader's computer. We finish by discussing this toy example so that the reader can interactively follow along on their computer. This work will be included as a chapter of a book on scientific machine learning, which is currently under revision and aimed at students.
- Abstract(参考訳): 例えば、敵の例として不安定性の存在は、ニューラルネットワークの安定性の理解と強化に関する非常に活発な研究領域を生み出した。
本研究は, 連続力学系への接続と最適制御に焦点をあて, 鳥の視線を観察する。
この分野の既存の作業の多くを支えている基本的な概念を特定し、記述する。
次に、安定したニューラルネットワークを設計し、理論的背景を開発し、これらのネットワークをどのように実装できるかを説明するための、特定のアプローチの詳細について述べる。
読者が適応し拡張できるアプローチを実装するコードを提供します。
コードにはさらに、画像分類の対角的堅牢性について、読者のコンピュータに重い要求を伴わずに実行できる、肉薄したおもちゃの例が載っているノートが含まれている。
我々は、読者がコンピュータ上でインタラクティブにフォローできるように、このおもちゃの例について議論する。
この研究は、現在改訂され、学生を対象とする科学機械学習に関する書籍の章に含まれる予定だ。
関連論文リスト
- Concept-Guided Interpretability via Neural Chunking [64.6429903327095]
ニューラルネットワークは、トレーニングデータの規則性を反映した生の集団活動のパターンを示す。
神経集団レベルで繰り返しチャンクを抽出する3つの方法を提案する。
私たちの研究は、認知原則と自然主義的データの構造の両方を活用する、解釈可能性の新しい方向性を指し示しています。
論文 参考訳(メタデータ) (2025-05-16T13:49:43Z) - Identifying Sub-networks in Neural Networks via Functionally Similar Representations [41.028797971427124]
我々は、異なるサブネットワークの存在を調査し、ネットワークの理解を自動化するための一歩を踏み出した。
具体的には、ニューラルネットワーク内の機能的に類似した表現の概念に基づく、新しい自動化されたタスク非依存のアプローチについて検討する。
提案手法は,人間と計算コストを最小限に抑えたニューラルネットワークの動作に関する有意義な洞察を提供する。
論文 参考訳(メタデータ) (2024-10-21T20:19:00Z) - Coding schemes in neural networks learning classification tasks [52.22978725954347]
完全接続型広義ニューラルネットワーク学習タスクについて検討する。
ネットワークが強力なデータ依存機能を取得することを示す。
驚くべきことに、内部表現の性質は神経の非線形性に大きく依存する。
論文 参考訳(メタデータ) (2024-06-24T14:50:05Z) - Conditional computation in neural networks: principles and research trends [48.14569369912931]
本稿では,ニューラルネットワークの設計にテクトコンディショナリ計算を適用するという,新たな領域の原理とアイデアを要約する。
特に、入力に条件付きで計算グラフの一部を動的に活性化または非活性化するニューラルネットワークに焦点を当てる。
論文 参考訳(メタデータ) (2024-03-12T11:56:38Z) - DISCOVER: Making Vision Networks Interpretable via Competition and
Dissection [11.028520416752325]
この研究は、ポストホック解釈可能性、特にネットワーク分割に寄与する。
私たちのゴールは、視覚タスクで訓練されたネットワークにおいて、各ニューロンの個々の機能を容易に発見できるフレームワークを提供することです。
論文 参考訳(メタデータ) (2023-10-07T21:57:23Z) - Learning Contact Dynamics using Physically Structured Neural Networks [81.73947303886753]
ディープニューラルネットワークと微分方程式の接続を用いて、オブジェクト間の接触ダイナミクスを表現するディープネットワークアーキテクチャのファミリを設計する。
これらのネットワークは,ノイズ観測から不連続な接触事象をデータ効率良く学習できることを示す。
以上の結果から,タッチフィードバックの理想化形態は,この学習課題を扱いやすくするための重要な要素であることが示唆された。
論文 参考訳(メタデータ) (2021-02-22T17:33:51Z) - How Researchers Use Diagrams in Communicating Neural Network Systems [5.064404027153093]
本稿では,ニューラルネットワークシステム図の利用について述べる。
ダイアグラムの作成と解釈の両方において、使用法、知覚、嗜好の多様性が高いことが分かりました。
既存のガイダンスとともにインタビューデータを考慮し、ニューラルネットワークシステム図の作り方を改善するためのガイドラインを提案する。
論文 参考訳(メタデータ) (2020-08-28T10:21:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。