論文の概要: Discriminative Adversarial Search for Abstractive Summarization
- arxiv url: http://arxiv.org/abs/2002.10375v2
- Date: Sun, 30 Aug 2020 07:21:53 GMT
- ステータス: 処理完了
- システム内更新日: 2022-12-29 02:53:43.093721
- Title: Discriminative Adversarial Search for Abstractive Summarization
- Title(参考訳): 抽象要約のための識別的逆探索
- Authors: Thomas Scialom, Paul-Alexis Dray, Sylvain Lamprier, Benjamin
Piwowarski, Jacopo Staiano
- Abstract要約: シーケンシャルデコード(DAS)の新しい手法を提案する。
DASは外部メトリクスを必要とせず、露光バイアスの影響を軽減するのが望ましい特性である。
抽象的な要約作業における提案手法の有効性について検討する。
- 参考スコア(独自算出の注目度): 29.943949944682196
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: We introduce a novel approach for sequence decoding, Discriminative
Adversarial Search (DAS), which has the desirable properties of alleviating the
effects of exposure bias without requiring external metrics. Inspired by
Generative Adversarial Networks (GANs), wherein a discriminator is used to
improve the generator, our method differs from GANs in that the generator
parameters are not updated at training time and the discriminator is only used
to drive sequence generation at inference time.
We investigate the effectiveness of the proposed approach on the task of
Abstractive Summarization: the results obtained show that a naive application
of DAS improves over the state-of-the-art methods, with further gains obtained
via discriminator retraining. Moreover, we show how DAS can be effective for
cross-domain adaptation. Finally, all results reported are obtained without
additional rule-based filtering strategies, commonly used by the best
performing systems available: this indicates that DAS can effectively be
deployed without relying on post-hoc modifications of the generated outputs.
- Abstract(参考訳): 本稿では,外部の指標を必要とせず,露出バイアスの影響を緩和する望ましい性質を持つシーケンスデコード,判別逆探索(das)について紹介する。
GAN(Generative Adversarial Networks)にインスパイアされ,ジェネレータの改良にディスクリミネータを用いることで,ジェネレータパラメータがトレーニング時に更新されず,推論時にのみディスクリミネータがシーケンス生成に使用される点が異なる。
提案手法が抽象的要約作業に与える影響について検討し,DASの素質的応用が最先端の手法よりも向上し,識別器再訓練によりさらなる成果が得られたことを示す。
さらに,DASがドメイン間適応に有効であることを示す。
最後に、報告されたすべての結果は、利用可能な最高のパフォーマンスシステムで一般的に使用されるルールベースのフィルタリング戦略を使わずに得られる。
関連論文リスト
- GADT: Enhancing Transferable Adversarial Attacks through Gradient-guided Adversarial Data Transformation [17.391427373945803]
本稿では,DA に基づく攻撃アルゴリズム GADT を提案する。これは反復的アンタゴニズムにより適切な DA パラメータを識別し,これらのパラメータに基づいて後続推定を用いて AN を更新する。
GADTは、クエリベースの攻撃など、他のブラックボックス攻撃シナリオで利用することができ、現実世界のAIアプリケーションに対する攻撃を強化する新たな手段を提供する。
論文 参考訳(メタデータ) (2024-10-24T11:21:49Z) - DiffPoGAN: Diffusion Policies with Generative Adversarial Networks for Offline Reinforcement Learning [22.323173093804897]
オフライン強化学習は、環境と対話することなく、事前にコンパイルされたオフラインデータセットから最適なポリシーを学ぶことができる。
最近の研究はGAN(Generative Adversarial Network)を用いてこの問題に対処している。
拡散にインスパイアされたDiffusion Policies with Generative Adversarial Networks (DiffPoGAN) という新しいオフラインRL手法を提案する。
論文 参考訳(メタデータ) (2024-06-13T13:15:40Z) - GE-AdvGAN: Improving the transferability of adversarial samples by
gradient editing-based adversarial generative model [69.71629949747884]
GAN(Generative Adversarial Networks)のような逆生成モデルは、様々な種類のデータを生成するために広く応用されている。
本研究では, GE-AdvGAN という新しいアルゴリズムを提案する。
論文 参考訳(メタデータ) (2024-01-11T16:43:16Z) - Anti-Exploration by Random Network Distillation [63.04360288089277]
ランダムネットワーク蒸留 (RND) の条件付けは, 不確実性推定器として用いるのに十分な識別性がないことを示す。
この制限は、FiLM(Feature-wise Linear Modulation)に基づく条件付けによって回避できることを示す。
D4RLベンチマークで評価したところ、アンサンブルベースの手法に匹敵する性能を達成でき、アンサンブルのない手法よりも広いマージンで性能を向上できることがわかった。
論文 参考訳(メタデータ) (2023-01-31T13:18:33Z) - Mitigating Algorithmic Bias with Limited Annotations [65.060639928772]
機密属性が公開されていない場合、バイアスを軽減するために、トレーニングデータの小さな部分を手動でアノテートする必要がある。
本稿では,アルゴリズムバイアスの影響を最大限に排除するために,限定アノテーションを誘導する対話型フレームワークであるアクティブペナライゼーション・オブ・差別(APOD)を提案する。
APODは完全なアノテートバイアス緩和と同等のパフォーマンスを示しており、機密情報が制限された場合、APODが現実世界のアプリケーションに利益をもたらすことを実証している。
論文 参考訳(メタデータ) (2022-07-20T16:31:19Z) - Augmentation-Aware Self-Supervision for Data-Efficient GAN Training [68.81471633374393]
識別器が過度に適合する傾向があるため、限られたデータでGANを訓練することは困難である。
本稿では,拡張データの拡張パラメータを予測する,拡張型自己教師型識別器を提案する。
本稿では,クラス条件の BigGAN と非条件の StyleGAN2 アーキテクチャを用いた State-of-the-art (SOTA) 手法と比較する。
論文 参考訳(メタデータ) (2022-05-31T10:35:55Z) - Reusing the Task-specific Classifier as a Discriminator:
Discriminator-free Adversarial Domain Adaptation [55.27563366506407]
非教師付きドメイン適応(UDA)のための識別器なし対向学習ネットワーク(DALN)を導入する。
DALNは、統一された目的によって明確なドメインアライメントとカテゴリの区別を達成する。
DALNは、さまざまなパブリックデータセット上の既存の最先端(SOTA)メソッドと比較して好意的に比較する。
論文 参考訳(メタデータ) (2022-04-08T04:40:18Z) - Sampling-Decomposable Generative Adversarial Recommender [84.05894139540048]
サンプル分解可能な生成逆数レコメンダ(SD-GAR)を提案する。
本フレームワークでは, 自己正規化重要度サンプリングにより, 生成元と最適値とのばらつきを補償する。
提案アルゴリズムを5つの実世界のレコメンデーションデータセットを用いて広範囲に評価する。
論文 参考訳(メタデータ) (2020-11-02T13:19:10Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。