論文の概要: NewsRECON: News article REtrieval for image CONtextualization
- arxiv url: http://arxiv.org/abs/2601.14121v1
- Date: Tue, 20 Jan 2026 16:15:53 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-01-21 22:47:23.409063
- Title: NewsRECON: News article REtrieval for image CONtextualization
- Title(参考訳): NewsRECON: Image Contextualizationのためのニュース記事検索
- Authors: Jonathan Tonglet, Iryna Gurevych, Tinne Tuytelaars, Marie-Francine Moens,
- Abstract要約: 本稿では,関連ニュース記事と画像をリンクして,記事メタデータから日付と場所を推測する手法であるNewsRECONを紹介する。
TARAと5Pils-OOCの実験では、NewsRECONは以前の作業よりも優れており、新しいSOTAを達成するためにマルチモーダルな大規模言語モデルと組み合わせることができる。
- 参考スコア(独自算出の注目度): 96.77112912009987
- License: http://creativecommons.org/licenses/by-sa/4.0/
- Abstract: Identifying when and where a news image was taken is crucial for journalists and forensic experts to produce credible stories and debunk misinformation. While many existing methods rely on reverse image search (RIS) engines, these tools often fail to return results, thereby limiting their practical applicability. In this work, we address the challenging scenario where RIS evidence is unavailable. We introduce NewsRECON, a method that links images to relevant news articles to infer their date and location from article metadata. NewsRECON leverages a corpus of over 90,000 articles and integrates: (1) a bi-encoder for retrieving event-relevant articles; (2) two cross-encoders for reranking articles by location and event consistency. Experiments on the TARA and 5Pils-OOC show that NewsRECON outperforms prior work and can be combined with a multimodal large language model to achieve new SOTA results in the absence of RIS evidence. We make our code available.
- Abstract(参考訳): ジャーナリストや法医学の専門家は、いつ、どこでニュース画像が撮られたかを特定することが、信頼できる物語を制作し、誤った情報をデバンクする上で不可欠である。
既存の多くの手法はリバースイメージサーチ(RIS)エンジンに依存しているが、これらのツールは結果の返却に失敗し、実用的な適用性を制限している。
本稿では、RISの証拠が利用できない難題に対処する。
本稿では,関連ニュース記事と画像をリンクして,記事メタデータから日付と場所を推測する手法であるNewsRECONを紹介する。
NewsRECONは、90,000以上の記事のコーパスを活用し、(1)イベント関連記事の検索のためのバイエンコーダ、(2)位置情報とイベント整合性による記事の再掲載のための2つのクロスエンコーダを統合する。
TARAと5Pils-OOCの実験では、NewsRECONは以前の作業よりも優れており、新しいSOTAを達成するためにマルチモーダルな大規模言語モデルと組み合わせることができる。
コードを利用可能にしています。
関連論文リスト
- Dataset of News Articles with Provenance Metadata for Media Relevance Assessment [0.7366405857677227]
アウト・オブ・コンテクスト(Out-of-context)と誤分布画像(disattributed image)は、現代の偽情報や偽情報の風景におけるメディア操作の先駆的な形態である。
本稿では,プロビデンスタグ付き画像を用いたニュース記事データセットであるNews Media Provenanceデータセットを紹介する。
本稿では,このデータセット上の2つのタスク,起点関連位置(LOR)と始点関連時刻(DTOR)を定式化し,6つの大言語モデル(LLM)のベースライン結果を示す。
LORのゼロショット性能は期待できるが、DTORのパフォーマンスは妨げられ、特殊なアーキテクチャや今後の作業のための余地を残している。
論文 参考訳(メタデータ) (2025-06-11T15:21:05Z) - WikiVideo: Article Generation from Multiple Videos [82.00241010200368]
実世界の出来事に関する複数のビデオからウィキペディア風の記事を作成する作業を紹介する。
このギャップを埋めるために、私たちはWikiVideoを紹介します。
複数のビデオから記事を作成するためのインタラクティブな手法である共同記事生成(CAG)を提案する。
論文 参考訳(メタデータ) (2025-04-01T16:22:15Z) - Assessing News Thumbnail Representativeness: Counterfactual text can enhance the cross-modal matching ability [5.111382868644429]
ニュース画像がニューステキストで議論されているアクターを表すかどうかに焦点をあてる。
我々は,1000個のニュースサムネイル画像とテキストペアのデータセットであるNewsTTを紹介する。
仮説に従って視覚と言語バイエンコーダを更新するコントラスト学習フレームワークであるCFT-CLIPを提案する。
論文 参考訳(メタデータ) (2024-02-17T01:27:29Z) - Visually-Aware Context Modeling for News Image Captioning [54.31708859631821]
News Image Captioningは、ニュース記事や画像からキャプションを作成することを目的としている。
より優れた名前埋め込みを学習するための顔命名モジュールを提案する。
私たちはCLIPを使用して、画像にセマンティックに近い文を検索します。
論文 参考訳(メタデータ) (2023-08-16T12:39:39Z) - Multiverse: Multilingual Evidence for Fake News Detection [71.51905606492376]
Multiverseは、偽ニュースの検出に使用できる多言語エビデンスに基づく新機能である。
偽ニュース検出機能としての言語間証拠の使用仮説を確認した。
論文 参考訳(メタデータ) (2022-11-25T18:24:17Z) - Show, Write, and Retrieve: Entity-aware Article Generation and Retrieval [18.270878909735256]
我々は、名前付きエンティティを言語モデルに明示的に組み込むために、ENtity対応の記事GeneratIoNとrEtrievalフレームワークを提案する。
我々は、GoodNews、VisualNews、WikiTextの3つの公開データセットで実験を行った。
その結果,本モデルでは,記事の検索性能が4~5倍向上し,リコール@1が3~4%向上した。
論文 参考訳(メタデータ) (2021-12-11T05:32:09Z) - Supporting verification of news articles with automated search for
semantically similar articles [0.0]
偽ニュースを扱うための証拠検索手法を提案する。
学習課題は教師なし機械学習問題として定式化される。
われわれのアプローチは、コンセプトドリフトとは無関係である。
機械学習タスクはテキスト内の仮説とは独立している。
論文 参考訳(メタデータ) (2021-03-29T12:56:59Z) - News Image Steganography: A Novel Architecture Facilitates the Fake News
Identification [52.83247667841588]
フェイクニュースの大部分が、他の情報源からのアンスタンプ画像を引用している。
本稿では,GANに基づく画像ステガノグラフィによる不整合を明らかにするために,News Image Steganographyというアーキテクチャを提案する。
論文 参考訳(メタデータ) (2021-01-03T11:12:23Z) - Transform and Tell: Entity-Aware News Image Captioning [77.4898875082832]
本稿では,ニュース記事に埋め込まれた画像のキャプションを生成するエンドツーエンドモデルを提案する。
画像中の顔や物体とキャプション内の単語を関連付けることで,マルチモーダル・マルチヘッドアテンション機構によって,最初の課題に対処する。
本稿では、バイトペアエンコーディングを用いて単語部分の列としてキャプションを生成する、最先端のトランスフォーマー言語モデルによる第2の課題に取り組む。
論文 参考訳(メタデータ) (2020-04-17T05:44:37Z) - Untrue.News: A New Search Engine For Fake Stories [2.642406403099596]
本稿では,偽ニュースの新しい検索エンジンであるUntrue Newsを実演する。
Untrue Newsは、ほぼリアルタイムで結果を提供するLuceneライブラリをベースにした、スケーラブルな新しい分析検索エンジンに依存している。
論文 参考訳(メタデータ) (2020-02-16T14:32:22Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。