論文の概要: Generating by Understanding: Neural Visual Generation with Logical
Symbol Groundings
- arxiv url: http://arxiv.org/abs/2310.17451v1
- Date: Thu, 26 Oct 2023 15:00:21 GMT
- ステータス: 処理完了
- システム内更新日: 2023-10-27 19:49:33.331718
- Title: Generating by Understanding: Neural Visual Generation with Logical
Symbol Groundings
- Title(参考訳): 理解による生成:論理記号の接地による神経視覚生成
- Authors: Yifei Peng, Yu Jin, Zhexu Luo, Yao-Xiang Ding, Wang-Zhou Dai, Zhong
Ren, Kun Zhou
- Abstract要約: 本稿では,ニューラル・シンボリック・ラーニング・アプローチであるAbductive Visual Generation(AbdGen)を提案し,論理プログラミングシステムとニューラル・ビジュアル・ジェネレーション・モデルを統合する。
我々はAbdGenがシンボル代入のインスタンスレベルのラベル情報を大幅に少なくすることを示した。
我々のアプローチは、既存のアプローチの能力から外れたデータから、基礎となる論理的生成規則を効果的に学習することができる。
- 参考スコア(独自算出の注目度): 26.134405924834525
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Despite the great success of neural visual generative models in recent years,
integrating them with strong symbolic knowledge reasoning systems remains a
challenging task. The main challenges are two-fold: one is symbol assignment,
i.e. bonding latent factors of neural visual generators with meaningful symbols
from knowledge reasoning systems. Another is rule learning, i.e. learning new
rules, which govern the generative process of the data, to augment the
knowledge reasoning systems. To deal with these symbol grounding problems, we
propose a neural-symbolic learning approach, Abductive Visual Generation
(AbdGen), for integrating logic programming systems with neural visual
generative models based on the abductive learning framework. To achieve
reliable and efficient symbol assignment, the quantized abduction method is
introduced for generating abduction proposals by the nearest-neighbor lookups
within semantic codebooks. To achieve precise rule learning, the contrastive
meta-abduction method is proposed to eliminate wrong rules with positive cases
and avoid less-informative rules with negative cases simultaneously.
Experimental results on various benchmark datasets show that compared to the
baselines, AbdGen requires significantly fewer instance-level labeling
information for symbol assignment. Furthermore, our approach can effectively
learn underlying logical generative rules from data, which is out of the
capability of existing approaches.
- Abstract(参考訳): 近年の神経視覚生成モデルの成功にもかかわらず、強力な記号的知識推論システムとそれらを統合することは難しい課題である。
主な課題は2つある:1つはシンボル割り当て、すなわち知識推論システムからの有意義なシンボルと神経視覚生成器の潜在因子を結合することである。
もうひとつのルール学習は、知識推論システムを強化するために、データの生成プロセスを管理する新しいルールを学習することである。
このようなシンボル基底問題に対処するため,帰納的学習フレームワークに基づく論理プログラミングシステムとニューラルビジュアル生成モデルを統合するための,ニューラルネットワークのシンボル的学習手法であるAbdGenを提案する。
信頼性と効率的なシンボル代入を実現するため、セマンティックコードブック内の最も近い隣り合うルックアップによる減算提案を生成する量子化減算法を導入した。
厳密な規則学習を実現するために,正の場合の誤った規則を排除し,負の場合の少ない規則を同時に回避するために,対照的なメタアブダクション法を提案する。
さまざまなベンチマークデータセットの実験結果から、AbdGenはベースラインと比較してシンボル代入のインスタンスレベルのラベリング情報を著しく少なくすることが示された。
さらに,本手法は既存の手法では不可能なデータから論理生成規則を効果的に学習することができる。
関連論文リスト
- Symbol-LLM: Leverage Language Models for Symbolic System in Visual Human
Activity Reasoning [58.5857133154749]
本稿では,広い範囲のシンボルと合理的なルールを持つ新しい記号体系を提案する。
我々は,LLMの最近の進歩を2つの理想的な性質の近似として活用する。
本手法は,広範囲な活動理解タスクにおいて優位性を示す。
論文 参考訳(メタデータ) (2023-11-29T05:27:14Z) - LOGICSEG: Parsing Visual Semantics with Neural Logic Learning and
Reasoning [73.98142349171552]
LOGICSEGは、神経誘導学習と論理推論をリッチデータとシンボリック知識の両方に統合する、全体論的視覚意味論である。
ファジィ論理に基づく連続的な緩和の間、論理式はデータとニューラルな計算グラフに基礎を置いており、論理によるネットワークトレーニングを可能にする。
これらの設計によりLOGICSEGは、既存のセグメンテーションモデルに容易に統合できる汎用的でコンパクトなニューラル論理マシンとなる。
論文 参考訳(メタデータ) (2023-09-24T05:43:19Z) - Neuro-Symbolic Learning of Answer Set Programs from Raw Data [54.56905063752427]
Neuro-Symbolic AIは、シンボリックテクニックの解釈可能性と、生データから学ぶ深層学習の能力を組み合わせることを目的としている。
本稿では,ニューラルネットワークを用いて生データから潜在概念を抽出するNSIL(Neuro-Symbolic Inductive Learner)を提案する。
NSILは表現力のある知識を学習し、計算的に複雑な問題を解き、精度とデータ効率の観点から最先端のパフォーマンスを達成する。
論文 参考訳(メタデータ) (2022-05-25T12:41:59Z) - Enhancing Neural Mathematical Reasoning by Abductive Combination with
Symbolic Library [5.339286921277565]
本稿では,人的知識でプログラムされた離散的なシステムと帰納的な組み合わせによって,いくつかの能力が達成できることを実証する。
数学的推論データセットでは、最近提案された帰納的学習フレームワークを採用し、トランスフォーマーモデルと記号数学ライブラリを組み合わせたABL-Symアルゴリズムを提案する。
論文 参考訳(メタデータ) (2022-03-28T04:19:39Z) - Improving Coherence and Consistency in Neural Sequence Models with
Dual-System, Neuro-Symbolic Reasoning [49.6928533575956]
我々は、神経系1と論理系2の間を仲介するために神経推論を用いる。
強靭なストーリー生成とグラウンドド・インストラクション・フォローリングの結果、このアプローチは神経系世代におけるコヒーレンスと精度を高めることができることを示した。
論文 参考訳(メタデータ) (2021-07-06T17:59:49Z) - pix2rule: End-to-end Neuro-symbolic Rule Learning [84.76439511271711]
本稿では,画像のオブジェクトへの処理,学習関係,論理規則に関する完全なニューロシンボリックな手法を提案する。
主な貢献は、シンボリックリレーションとルールを抽出できるディープラーニングアーキテクチャにおける差別化可能なレイヤである。
我々のモデルは最先端のシンボリックラーナーを超えてスケールし、ディープリレーショナルニューラルネットワークアーキテクチャよりも優れていることを実証する。
論文 参考訳(メタデータ) (2021-06-14T15:19:06Z) - Abductive Knowledge Induction From Raw Data [12.868722327487752]
本稿では,帰納的メタ解釈学習(Meta_Abd$)を提案する。
実験の結果,$Meta_Abd$は予測精度とデータ効率で比較したシステムより優れることがわかった。
論文 参考訳(メタデータ) (2020-10-07T16:33:28Z) - Closed Loop Neural-Symbolic Learning via Integrating Neural Perception,
Grammar Parsing, and Symbolic Reasoning [134.77207192945053]
従来の手法は強化学習アプローチを用いてニューラルシンボリックモデルを学ぶ。
我々は,脳神経知覚と記号的推論を橋渡しする前に,textbfgrammarモデルをテキストシンボリックとして導入する。
本稿では,トップダウンのヒューマンライクな学習手順を模倣して誤りを伝播する新しいtextbfback-searchアルゴリズムを提案する。
論文 参考訳(メタデータ) (2020-06-11T17:42:49Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。