論文の概要: QMUL-SDS at SCIVER: Step-by-Step Binary Classification for Scientific
Claim Verification
- arxiv url: http://arxiv.org/abs/2104.11572v1
- Date: Fri, 23 Apr 2021 13:12:57 GMT
- ステータス: 処理完了
- システム内更新日: 2021-04-26 13:09:29.467654
- Title: QMUL-SDS at SCIVER: Step-by-Step Binary Classification for Scientific
Claim Verification
- Title(参考訳): SCIVERにおけるQMUL-SDS: 科学的クレーム検証のためのステップバイステップバイナリ分類
- Authors: Xia Zeng, Arkaitz Zubiaga
- Abstract要約: チームQMUL-SDSのSCIVER共有タスクへの参加を紹介します。
バイナリ分類を段階的に行うことで,科学的クレーム検証を行う手法を提案する。
ベースラインシステムと比較して、私たちは開発セットを大幅に改善しました。
- 参考スコア(独自算出の注目度): 6.7685587521303106
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Scientific claim verification is a unique challenge that is attracting
increasing interest. The SCIVER shared task offers a benchmark scenario to test
and compare claim verification approaches by participating teams and consists
in three steps: relevant abstract selection, rationale selection and label
prediction. In this paper, we present team QMUL-SDS's participation in the
shared task. We propose an approach that performs scientific claim verification
by doing binary classifications step-by-step. We trained a BioBERT-large
classifier to select abstracts based on pairwise relevance assessments for each
<claim, title of the abstract> and continued to train it to select rationales
out of each retrieved abstract based on <claim, sentence>. We then propose a
two-step setting for label prediction, i.e. first predicting "NOT_ENOUGH_INFO"
or "ENOUGH_INFO", then label those marked as "ENOUGH_INFO" as either "SUPPORT"
or "CONTRADICT". Compared to the baseline system, we achieve substantial
improvements on the dev set. As a result, our team is the No. 4 team on the
leaderboard.
- Abstract(参考訳): 科学的主張の検証は、興味を惹きつける独特な挑戦である。
SCIVER共有タスクは、参加チームによるクレーム検証アプローチのテストと比較のためのベンチマークシナリオを提供し、関連する抽象的選択、合理的選択、ラベル予測の3つのステップで構成される。
本稿では,共有タスクへのQMUL-SDSの参加について述べる。
本稿では,二項分類を段階的に行うことにより,科学的クレームの検証を行う手法を提案する。
そこで我々は,BioBERT-large分類器を訓練し,各<claim, title of the abstract>の相互関連性評価に基づいて抽出し,<claim, sentence>に基づいて抽出された各抽象の中から有理性を選択するように訓練を続けた。
次にラベル予測のための2段階の設定を提案する。
最初に "NOT_ENOUGH_INFO" または "ENOUGH_INFO" を予測し、"ENOUGH_INFO" とマークされたものを "SUPPORT" または "CONTRADICT" とラベル付けする。
ベースラインシステムと比較して、私たちは開発セットを大幅に改善しました。
その結果、私たちのチームはNoです。
リーダーボード上の4チーム。
関連論文リスト
- Self-Training with Pseudo-Label Scorer for Aspect Sentiment Quad Prediction [54.23208041792073]
Aspect Sentiment Quad Prediction (ASQP) は、与えられたレビューに対して全てのクワッド(アスペクト項、アスペクトカテゴリー、意見項、感情極性)を予測することを目的としている。
ASQPタスクにおける重要な課題はラベル付きデータの不足であり、既存のメソッドのパフォーマンスを制限している。
そこで我々は,擬似ラベルスコアラーを用いた自己学習フレームワークを提案し,レビューと擬似ラベルの一致をスコアラーが評価する。
論文 参考訳(メタデータ) (2024-06-26T05:30:21Z) - Claim Check-Worthiness Detection: How Well do LLMs Grasp Annotation Guidelines? [0.0]
ファクトチェックを必要とするテキストセグメントを識別するために、ゼロショットと少数ショットのLCMプロンプトを使用する。
各種領域の5つのCD/CWデータセットに対して,LLMの予測精度と校正精度を評価した。
提案手法により, 最適急進的冗長性はドメイン依存であり, 文脈の追加は性能を向上しないことがわかった。
論文 参考訳(メタデータ) (2024-04-18T13:31:05Z) - Unifying Token and Span Level Supervisions for Few-Shot Sequence
Labeling [18.24907067631541]
短いショットシーケンスラベリングは、少数のラベル付きサンプルに基づいて新しいクラスを特定することを目的としている。
本稿では,数ショットのシーケンスラベリングのためのCDAP(Consistent Dual Adaptive Prototypeal)ネットワークを提案する。
本モデルでは,3つのベンチマークデータセットに対して,最先端の新たな結果が得られる。
論文 参考訳(メタデータ) (2023-07-16T04:50:52Z) - Ambiguity-Resistant Semi-Supervised Learning for Dense Object Detection [98.66771688028426]
本研究では,一段階検出器のためのAmbiguity-Resistant Semi-supervised Learning (ARSL)を提案する。
擬似ラベルの分類とローカライズ品質を定量化するために,JCE(Joint-Confidence Estimation)を提案する。
ARSLは、曖昧さを効果的に軽減し、MS COCOおよびPASCALVOC上で最先端のSSOD性能を達成する。
論文 参考訳(メタデータ) (2023-03-27T07:46:58Z) - Text Summarization with Oracle Expectation [88.39032981994535]
抽出要約は、文書の中で最も重要な文を識別し、連結することによって要約を生成する。
ほとんどの要約データセットは、文書文が要約に値するかどうかを示す金のラベルを持っていない。
本稿では,ソフトな予測に基づく文ラベルを生成する,シンプルで効果的なラベル付けアルゴリズムを提案する。
論文 参考訳(メタデータ) (2022-09-26T14:10:08Z) - Query-focused Extractive Summarisation for Biomedical and COVID-19
Complex Question Answering [0.0]
本稿では,最近の2つのBioASQ Synergy Tasksへのマッコーリー大学の参加について述べる。
本稿では, 問合せに焦点を絞った抽出要約手法を適用し, 生体医学的問題に対する複雑な回答を生成する。
The Synergy task, we selected the candidate sentences following two phases: document search and snippet search。
そこで本研究では,BioASQ10bトレーニングデータの下半期にトレーニングを行った結果の改善について検討した。
論文 参考訳(メタデータ) (2022-09-05T07:56:44Z) - Label Matching Semi-Supervised Object Detection [85.99282969977541]
半教師対象検出は,教師主導型自己学習の開発において大きな進歩を遂げている。
ラベルミスマッチ問題は、以前の研究でまだ完全に解明されていないため、自己学習中に重大な確証バイアスが生じる。
本稿では,2つの異なる相補的視点から,単純かつ効果的な LabelMatch フレームワークを提案する。
論文 参考訳(メタデータ) (2022-06-14T05:59:41Z) - RerrFact: Reduced Evidence Retrieval Representations for Scientific
Claim Verification [4.052777228128475]
本稿では,各予測サブタスクに対して連続的に二項分類を行うモジュラー手法を提案する。
我々は、まず非関連な有理を区別し、与えられた主張に対する支持または反証する有理を識別する2段階のスタンス予測を行う。
実験的に、我々のシステムRerrFactは微調整もシンプルな設計もせず、モデルパラメータのごく一部はリーダーボード上で競争的に公正である。
論文 参考訳(メタデータ) (2022-02-05T21:52:45Z) - Abstract, Rationale, Stance: A Joint Model for Scientific Claim
Verification [18.330265729989843]
我々は,3つのタスクのモジュールを,機械読解フレームワークを用いて共同で学習するアプローチをARSJointとして提案する。
ベンチマークデータセットSciFactの実験結果は、我々のアプローチが既存の作業より優れていることを示している。
論文 参考訳(メタデータ) (2021-09-13T10:07:26Z) - SPL-MLL: Selecting Predictable Landmarks for Multi-Label Learning [87.27700889147144]
我々は、入力(予測可能)に応じて予測しやすく、他の可能なラベル(表現可能)をうまく回復できるランドマークとして、ラベルの小さなサブセットを選択することを提案する。
我々は,ADM(Alternating Direction Method)を用いてこの問題を解決する。実世界のデータセットに関する実証研究により,本手法が他の最先端手法よりも優れた分類性能を実現することを示す。
論文 参考訳(メタデータ) (2020-08-16T11:07:44Z) - Exploring Explainable Selection to Control Abstractive Summarization [51.74889133688111]
説明可能性を重視した新しいフレームワークを開発する。
新しいペアワイズ行列は、文の相互作用、中心性、属性スコアをキャプチャする。
コンストラクタ内の文分割アテンション機構は、最終要約が所望のコンテンツを強調することを保証する。
論文 参考訳(メタデータ) (2020-04-24T14:39:34Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。