論文の概要: Synthesizing Political Zero-Shot Relation Classification via Codebook
Knowledge, NLI, and ChatGPT
- arxiv url: http://arxiv.org/abs/2308.07876v1
- Date: Tue, 15 Aug 2023 16:41:53 GMT
- ステータス: 処理完了
- システム内更新日: 2023-08-16 12:02:09.076028
- Title: Synthesizing Political Zero-Shot Relation Classification via Codebook
Knowledge, NLI, and ChatGPT
- Title(参考訳): Codebook Knowledge, NLI, ChatGPTによる政治ゼロショット関係分類の合成
- Authors: Yibo Hu, Erick Skorupa Parolin, Latifur Khan, Patrick T. Brandt,
Javier Osorio, Vito J. D'Orazio
- Abstract要約: イベント符号化における最近の教師付きモデルによるパターンマッチング法の性能向上
これらの制約に対処するために、政治事象関係分類のためのゼロショットアプローチを検討する。
本研究は,ChatGPTと新しい自然言語推論(NLI)に基づくアプローチであるZSPを包含する。
- 参考スコア(独自算出の注目度): 11.442927880101982
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Recent supervised models for event coding vastly outperform pattern-matching
methods. However, their reliance solely on new annotations disregards the vast
knowledge within expert databases, hindering their applicability to
fine-grained classification. To address these limitations, we explore zero-shot
approaches for political event ontology relation classification, by leveraging
knowledge from established annotation codebooks. Our study encompasses both
ChatGPT and a novel natural language inference (NLI) based approach named ZSP.
ZSP adopts a tree-query framework that deconstructs the task into context,
modality, and class disambiguation levels. This framework improves
interpretability, efficiency, and adaptability to schema changes. By conducting
extensive experiments on our newly curated datasets, we pinpoint the
instability issues within ChatGPT and highlight the superior performance of
ZSP. ZSP achieves an impressive 40% improvement in F1 score for fine-grained
Rootcode classification. ZSP demonstrates competitive performance compared to
supervised BERT models, positioning it as a valuable tool for event record
validation and ontology development. Our work underscores the potential of
leveraging transfer learning and existing expertise to enhance the efficiency
and scalability of research in the field.
- Abstract(参考訳): イベント符号化における最近の教師付きモデルによるパターンマッチング法の性能向上
しかし、新しいアノテーションにのみ依存していることは、専門家データベースにおける膨大な知識を無視し、きめ細かい分類の適用性を妨げている。
これらの制限に対処するため,我々は,確立された注釈コードブックからの知識を活用し,政治イベントオントロジー関係分類のためのゼロショットアプローチを検討する。
本研究は,ChatGPTと新しい自然言語推論(NLI)に基づくアプローチであるZSPを包含する。
ZSPは、タスクをコンテキスト、モダリティ、クラス曖昧化レベルに分解するツリークエリフレームワークを採用している。
このフレームワークは、スキーマ変更の解釈性、効率性、適応性を改善する。
新たにキュレートしたデータセットに対して広範な実験を行うことで、ChatGPT内の不安定性問題を特定し、ZSPの優れたパフォーマンスを強調します。
ZSPは、きめ細かいRootcode分類のためのF1スコアを40%改善した。
ZSPは、教師付きBERTモデルと比較して競合性能を示し、イベントレコード検証とオントロジー開発のための貴重なツールとして位置づけている。
私たちの研究は、トランスファー学習と既存の専門知識を活用して、この分野の研究の効率と拡張性を高める可能性を強調しています。
関連論文リスト
- CELA: Cost-Efficient Language Model Alignment for CTR Prediction [71.85120354973073]
CTR(Click-Through Rate)予測は、レコメンダシステムにおいて最重要位置を占める。
最近の取り組みは、プレトレーニング言語モデル(PLM)を統合することでこれらの課題を緩和しようとしている。
CTR予測のためのtextbfCost-textbfEfficient textbfLanguage Model textbfAlignment (textbfCELA)を提案する。
論文 参考訳(メタデータ) (2024-05-17T07:43:25Z) - SEER-ZSL: Semantic Encoder-Enhanced Representations for Generalized
Zero-Shot Learning [0.7420433640907689]
一般化ゼロショット学習(GZSL)は、見知らぬクラスから知識を伝達することで、目に見えないクラスを認識する。
本稿では,一般化ギャップに対処するための二重戦略を提案する。
論文 参考訳(メタデータ) (2023-12-20T15:18:51Z) - Open-Vocabulary Segmentation with Semantic-Assisted Calibration [73.39366775301382]
オープンボキャブラリセグメンテーション(OVS)は,CLIPの文脈に先行して,語彙内およびドメインバイアスの埋め込み空間を校正することで研究される。
オープン語彙セグメンテーションベンチマークにおける最先端性能を実現するために,セマンティック・アシブ・キャリブレーション・ネットワーク(SCAN)を提案する。
論文 参考訳(メタデータ) (2023-12-07T07:00:09Z) - Injecting linguistic knowledge into BERT for Dialogue State Tracking [60.42231674887294]
本稿では,教師なしの枠組みを用いて言語知識を抽出する手法を提案する。
次に、この知識を用いて、対話状態追跡(DST)タスクにおけるBERTの性能と解釈可能性を高める。
このフレームワークを様々なDSTタスクでベンチマークし、精度の顕著な改善を観察する。
論文 参考訳(メタデータ) (2023-11-27T08:38:42Z) - Improving Language Models Meaning Understanding and Consistency by
Learning Conceptual Roles from Dictionary [65.268245109828]
現代事前訓練言語モデル(PLM)の非人間的行動は、その信頼性を損なう主要な原因である。
驚くべき現象は、矛盾した結果を生み出す不整合予測の生成である。
本研究では,PLMの認知度を向上させることで,一貫性のない行動問題を緩和する実践的アプローチを提案する。
論文 参考訳(メタデータ) (2023-10-24T06:15:15Z) - Prompting classes: Exploring the Power of Prompt Class Learning in
Weakly Supervised Semantic Segmentation [15.467510304266883]
本稿では,プロンプトチューニングが弱教師付きセマンティックセグメンテーションに与える影響について検討する。
PrOmpt cLass lEarning(POLE)戦略に基づく新しいアプローチを提案する。
我々は、よく知られたWSSSベンチマークにおいて、シンプルで効率的なアプローチがSOTA性能を達成することを実証する。
論文 参考訳(メタデータ) (2023-06-30T19:25:18Z) - Navigating Prompt Complexity for Zero-Shot Classification: A Study of Large Language Models in Computational Social Science [27.727207443432278]
本稿では,ChatGPTとOpenAssistantの2つの公開言語モデルのゼロショット性能を評価する。
その結果,異なるプロンプト戦略が分類精度に大きく影響し,F1スコアが10%を超えることが判明した。
論文 参考訳(メタデータ) (2023-05-23T17:48:21Z) - ChatGraph: Interpretable Text Classification by Converting ChatGPT
Knowledge to Graphs [54.48467003509595]
ChatGPTは、様々な自然言語処理(NLP)タスクにおいて優れたパフォーマンスを示している。
テキスト分類などの特定のタスクにChatGPTのパワーを利用する新しいフレームワークを提案する。
本手法は,従来のテキスト分類法と比較して,より透過的な意思決定プロセスを提供する。
論文 参考訳(メタデータ) (2023-05-03T19:57:43Z) - Active Pointly-Supervised Instance Segmentation [106.38955769817747]
アクティブポイント制御型インスタンスセグメンテーション(APIS)という,経済的なアクティブな学習環境を提案する。
APISはボックスレベルのアノテーションから始まり、ボックス内のポイントを反復的にサンプリングし、オブジェクトに落ちているかどうかを問う。
これらの戦略で開発されたモデルは、挑戦的なMS-COCOデータセットに対して一貫したパフォーマンス向上をもたらす。
論文 参考訳(メタデータ) (2022-07-23T11:25:24Z) - A Survey on Recent Advances in Sequence Labeling from Deep Learning
Models [19.753741555478793]
シーケンスラベリングは、様々なタスクを含む基本的な研究課題である。
ディープラーニングは、複雑な機能を自動的に学習する強力な能力のため、シーケンスラベリングタスクに使用されている。
論文 参考訳(メタデータ) (2020-11-13T02:29:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。