論文の概要: Uncertainty-Aware Web-Conditioned Scientific Fact-Checking
- arxiv url: http://arxiv.org/abs/2604.11036v1
- Date: Mon, 13 Apr 2026 06:01:20 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-14 20:13:16.355531
- Title: Uncertainty-Aware Web-Conditioned Scientific Fact-Checking
- Title(参考訳): 不確かさを意識したWebコンディション科学ファクトチェッキング
- Authors: Ashwin Vinod, Katrin Erk,
- Abstract要約: 本稿では,原子式述語・代名詞分解と校正・不確かさを主軸としたパイプラインについて述べる。
原子事実は、コンパクトなエビデンスグラウンドチェッカーによって検証された埋め込みを通じて、局所的なスニペットに整列される。
システムは二値分類と三値分類の両方をサポートし、三方向タスクのラベルをSupported, Refuted, NEIから予測する。
- 参考スコア(独自算出の注目度): 7.158918759352649
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Scientific fact-checking is vital for assessing claims in specialized domains such as biomedicine and materials science, yet existing systems often hallucinate or apply inconsistent reasoning, especially when verifying technical, compositional claims against an evidence snippet under source and cost/latency constraints. We present a pipeline centered on atomic predicate-argument decomposition and calibrated, uncertainty-gated corroboration: atomic facts are aligned to local snippets via embeddings, verified by a compact evidence-grounded checker, and only facts with uncertain support trigger domain-restricted web search over authoritative sources. The system supports both binary and tri-valued classification where it predicts labels from Supported, Refuted, NEI for three-way tasks. We evaluate under two regimes, Context-Only (no web) and Context+Web (uncertainty-gated web corroboration); when retrieved evidence conflicts with the provided context, we abstain with NEI rather than overriding the context. On multiple benchmarks, our framework surpasses the strongest benchmarks. In our experiments, web corroboration was invoked for only a minority of atomic facts on average, indicating that external evidence is consulted selectively under calibrated uncertainty rather than routinely. Overall, coupling atomic granularity with calibrated, uncertainty-gated corroboration yields more interpretable and context-conditioned verification, making the approach well-suited to high-stakes, single-document settings that demand traceable rationales, predictable cost/latency, and conservative.
- Abstract(参考訳): 科学的事実チェックは、バイオメディシンや材料科学のような専門分野における主張を評価するために不可欠であるが、既存のシステムは、しばしば幻覚的または一貫性のない推論を適用し、特に、ソースおよびコスト/レイテンシの制約の下で証拠スニペットに対する技術的、構成的クレームを検証する場合に必要である。
原子の事実は埋め込みによって局所的なスニペットに整列され、コンパクトなエビデンスグラウンドチェッカーによって検証され、不確実なサポートのある事実だけが権威のある情報源上でドメイン制限されたWeb検索をトリガーする。
このシステムは二値分類と三値分類の両方をサポートし、三方向タスクのラベルをSupported, Refuted, NEIから予測する。
我々は、コンテキストオンリー(Webではない)とコンテキスト+Web(不確実なWebのコロンボレーション)の2つの体制で評価し、得られた証拠が与えられたコンテキストと矛盾する場合、コンテキストをオーバーライドするのではなくNEIに従属する。
複数のベンチマークにおいて、我々のフレームワークは最強のベンチマークを上回っている。
実験では, 外部証拠は日常的にではなく, 校正された不確実性の下で選択的に相談されることが示唆された。
全体として、原子の粒度と校正された不確かさを結合すると、より解釈可能で文脈条件の検証が得られ、そのアプローチは、トレーサブルな合理性、予測可能なコスト/レイテンシ、保守的な単一文書設定に適している。
関連論文リスト
- ContextClaim: A Context-Driven Paradigm for Verifiable Claim Detection [17.165016272480262]
検証可能なクレーム検出は、クレームが、原則として外部の証拠に対して評価できる事実的なステートメントを表現できるかどうかを問う。
本研究では,コンテキスト駆動クレーム検出(Context-Driven Claim Detection,ContextClaim)を提案する。
我々は、さまざまなトピックとテキストジャンルをカバーする2つのデータセット、2022年のTwitterデータセット、PoliClaimの政治討論データセットについてContextClaimを評価した。
論文 参考訳(メタデータ) (2026-03-31T17:20:46Z) - CiteAudit: You Cited It, But Did You Read It? A Benchmark for Verifying Scientific References in the LLM Era [51.63024682584688]
大規模言語モデル (LLM) は新たなリスクを導入している。
本稿では,科学文献における幻覚的引用のための総合的なベンチマークおよび検出フレームワークについて紹介する。
我々のフレームワークは、精度と解釈可能性の両方において、先行手法を著しく上回っている。
論文 参考訳(メタデータ) (2026-02-26T19:17:39Z) - From Fluent to Verifiable: Claim-Level Auditability for Deep Research Agents [8.49451413641847]
研究生成が安価になるにつれて、監査可能性がボトルネックになる、と我々は主張する。
この観点からは,ディープリサーチエージェントの第一級設計および評価対象として,クレームレベルの監査性を提案する。
論文 参考訳(メタデータ) (2026-02-14T19:39:15Z) - SciIF: Benchmarking Scientific Instruction Following Towards Rigorous Scientific Intelligence [60.202862987441684]
科学的妥当性を確立する制約に厳格に固執しながら、問題を解決する能力。
具体的には,大学レベルの問題と制約の固定されたカタログをペアにすることで,この能力を評価するマルチディシプリンのベンチマークであるSciIFを紹介する。
SciIFは、解の正当性と多拘束性の両方を測定することにより、構成的推論失敗のきめ細かい診断を可能にする。
論文 参考訳(メタデータ) (2026-01-08T09:45:58Z) - Towards Real-Time Fake News Detection under Evidence Scarcity [66.58597356379907]
本稿では,リアルタイムフェイクニュース検出のための新しいフレームワークである評価アウェア・セレクション・オブ・エキスパートズ(EASE)を提案する。
EASEは、利用可能な証拠の十分性を評価した意思決定プロセスに適合する。
本稿では,新興ニュースのモデル一般化を限られた証拠で評価するための新しいベンチマークであるRealTimeNews-25を紹介する。
論文 参考訳(メタデータ) (2025-10-13T11:11:46Z) - Fact in Fragments: Deconstructing Complex Claims via LLM-based Atomic Fact Extraction and Verification [18.20994425756688]
Atomic Fact extract and Verification (AFEV) は、複雑なクレームを原子事実に反復的に分解する新しいフレームワークである。
AFEVは、精度と解釈可能性の両方において最先端のパフォーマンスを達成する。
論文 参考訳(メタデータ) (2025-06-09T05:49:43Z) - FactReasoner: A Probabilistic Approach to Long-Form Factuality Assessment for Large Language Models [59.171510592986735]
本稿では,確率論的推論に依拠した新たな事実性評価器FactReasonerを提案する。
ラベル付きおよびラベルなしのベンチマークデータセットの実験は、FactReasonerが最先端のプロンプトベースのアプローチよりも大幅に改善されていることを示す。
論文 参考訳(メタデータ) (2025-02-25T19:01:48Z) - TrendFact: A Benchmark for Explainable Hotspot Perception in Fact-Checking with Natural Language Explanation [9.221637941193606]
ホットスポット認識能力(HPA)とすべてのファクトチェックタスクを評価することができる最初のベンチマークであるTrendFactを紹介する。
TrendFactは、トレンドプラットフォームとプロのファクトチェックデータセットから得られた7,643のキュレートされたサンプルで構成されている。
また、動的エビデンス強化と影響スコアに基づく反復的自己回帰を統合した推論フレームワークであるFactISRを提案する。
論文 参考訳(メタデータ) (2024-10-19T15:25:19Z) - SCITAB: A Challenging Benchmark for Compositional Reasoning and Claim
Verification on Scientific Tables [68.76415918462418]
本報告では,1.2Kの専門的な科学的クレームからなる,挑戦的な評価データセットであるSCITABについて述べる。
広範な評価を通じて、SCITABは最先端のモデルに重大な課題をもたらすことを示した。
SCITABは,表の接地,主張のあいまいさ,構成的推論など,いくつかの独特な課題を明らかにした。
論文 参考訳(メタデータ) (2023-05-22T16:13:50Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。