論文の概要: Cross-Media Scientific Research Achievements Retrieval Based on Deep
Language Model
- arxiv url: http://arxiv.org/abs/2203.15595v1
- Date: Tue, 29 Mar 2022 14:04:53 GMT
- ステータス: 処理完了
- システム内更新日: 2022-03-30 16:44:05.178619
- Title: Cross-Media Scientific Research Achievements Retrieval Based on Deep
Language Model
- Title(参考訳): 深層言語モデルに基づくクロスメディア科学研究成果検索
- Authors: Benzhi Wang, Meiyu Liang, Feifei Kou and Mingying Xu
- Abstract要約: 本稿では,深層言語モデル(CARDL)に基づくマルチメディア科学研究成果検索手法を提案する。
異なるモーダルデータ間のセマンティックアソシエーションを学習することにより、統合されたメディア間セマンティック表現を実現する。
異なるモーダルデータ間のセマンティックな類似性マッチングにより、クロスメディア検索を実現する。
- 参考スコア(独自算出の注目度): 2.900289363118179
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Science and technology big data contain a lot of cross-media
information.There are images and texts in the scientific paper.The s ingle
modal search method cannot well meet the needs of scientific researchers.This
paper proposes a cross-media scientific research achievements retrieval method
based on deep language model (CARDL).It achieves a unified cross-media semantic
representation by learning the semantic association between different modal
data, and is applied to the generation of text semantic vector of scientific
research achievements, and then cross-media retrieval is realized through
semantic similarity matching between different modal data.Experimental results
show that the proposed CARDL method achieves better cross-modal retrieval
performance than existing methods. Key words science and technology big data ;
cross-media retrieval; cross-media semantic association learning; deep language
model; semantic similarity
- Abstract(参考訳): 科学と技術 ビッグデータには、多くのクロスメディア情報が含まれている。科学論文には画像とテキストがある。s ingle modal search methodは、科学研究者のニーズを十分に満たさない。本論文は、深層言語モデル(deep language model:cardl)に基づく、クロスメディア科学研究成果検索手法を提案する。
異なるモーダルデータ間の意味関係を学習し、科学研究成果のテキスト意味ベクトル生成に適用し、異なるモーダルデータ間の意味類似性マッチングにより、メディア横断検索を実現することにより、統一的なクロスメディア意味表現を実現する。
キーワード科学と技術ビッグデータ ; クロスメディア検索; クロスメディアセマンティックアソシエーション学習; ディープ言語モデル; セマンティック類似性
関連論文リスト
- Scholar Name Disambiguation with Search-enhanced LLM Across Language [0.2302001830524133]
本稿では,複数の言語にまたがる検索強化言語モデルを用いて,名前の曖昧さを改善する手法を提案する。
検索エンジンの強力なクエリ書き換え、意図認識、およびデータインデックス機能を利用することで、エンティティの識別やプロファイルの抽出を行うため、よりリッチな情報を集めることができる。
論文 参考訳(メタデータ) (2024-11-26T04:39:46Z) - VectorSearch: Enhancing Document Retrieval with Semantic Embeddings and
Optimized Search [1.0411820336052784]
本稿では、高度なアルゴリズム、埋め込み、インデックス化技術を活用して洗練された検索を行うVectorSearchを提案する。
提案手法は,革新的なマルチベクタ探索操作と高度な言語モデルによる検索の符号化を利用して,検索精度を大幅に向上させる。
実世界のデータセットの実験では、VectorSearchがベースラインのメトリクスを上回っている。
論文 参考訳(メタデータ) (2024-09-25T21:58:08Z) - ACE: A Generative Cross-Modal Retrieval Framework with Coarse-To-Fine Semantic Modeling [53.97609687516371]
我々は、エンドツーエンドのクロスモーダル検索のための先駆的なジェネリッククロスモーダル rEtrieval framework (ACE) を提案する。
ACEは、クロスモーダル検索における最先端のパフォーマンスを達成し、Recall@1の強いベースラインを平均15.27%上回る。
論文 参考訳(メタデータ) (2024-06-25T12:47:04Z) - Multi-Modal Retrieval For Large Language Model Based Speech Recognition [15.494654232953678]
我々は,kNN-LMとクロスアテンション手法の2つのアプローチによるマルチモーダル検索を提案する。
音声に基づくマルチモーダル検索はテキストベースの検索よりも優れていることを示す。
我々は,Spoken-Squad質問応答データセットを用いて,最先端の認識結果を得る。
論文 参考訳(メタデータ) (2024-06-13T22:55:22Z) - Text-Video Retrieval with Global-Local Semantic Consistent Learning [122.15339128463715]
我々は,シンプルで効果的なグローバル局所意味的一貫性学習(GLSCL)を提案する。
GLSCLは、テキストビデオ検索のためのモダリティをまたいだ潜在共有セマンティクスを活用する。
本手法はSOTAと同等の性能を実現し,計算コストの約220倍の高速化を実現している。
論文 参考訳(メタデータ) (2024-05-21T11:59:36Z) - Knowledge-Enhanced Hierarchical Information Correlation Learning for
Multi-Modal Rumor Detection [82.94413676131545]
マルチモーダルなうわさ検出のための知識強化型階層型情報相関学習手法(KhiCL)を提案する。
KhiCLは異質な一様性特徴を共通特徴空間に伝達するために、クロスモーダルな関節辞書を利用する。
画像やテキストから視覚的およびテキスト的実体を抽出し、知識関連推論戦略を設計する。
論文 参考訳(メタデータ) (2023-06-28T06:08:20Z) - Multimodal Relation Extraction with Cross-Modal Retrieval and Synthesis [89.04041100520881]
本研究は,対象物,文,画像全体に基づいて,テキストおよび視覚的証拠を検索することを提案する。
我々は,オブジェクトレベル,画像レベル,文レベル情報を合成し,同一性と異なるモダリティ間の推論を改善する新しい手法を開発した。
論文 参考訳(メタデータ) (2023-05-25T15:26:13Z) - Scientific and Technological Information Oriented Semantics-adversarial and Media-adversarial Cross-media Retrieval [21.630525836722036]
クロスメディア科学・技術情報検索は、クロスメディア研究における重要な課題の1つである。
本稿では,科学技術情報指向のセマンティックス・アドバイサル・メディア・クロスメディア検索手法(SMCR)を提案する。
SMCRは、メディア間のセマンティックな一貫性の喪失を最小化し、メディア間のセマンティックな識別をモデル化し、マッピング前後のセマンティックな類似性を維持する。
論文 参考訳(メタデータ) (2022-03-16T13:31:48Z) - Semantic Search for Large Scale Clinical Ontologies [63.71950996116403]
本稿では,大規模臨床語彙検索システムを構築するための深層学習手法を提案する。
本稿では,意味学習データに基づくトレーニングデータを生成するTriplet-BERTモデルを提案する。
このモデルは,5つの実ベンチマークデータセットを用いて評価され,提案手法は自由テキストから概念,概念まで,概念語彙の検索において高い結果が得られることを示す。
論文 参考訳(メタデータ) (2022-01-01T05:15:42Z) - Deep Learning Techniques for Future Intelligent Cross-Media Retrieval [58.20547387332133]
マルチメディア検索は、ビッグデータアプリケーションにおいて重要な役割を果たす。
マルチモーダルなディープラーニングアプローチが直面する課題に応じて,新しい分類法を提供する。
検索によく知られたクロスメディアデータセットを提示する。
論文 参考訳(メタデータ) (2020-07-21T09:49:33Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。