論文の概要: RSRank: Learning Relevance from Representational Shifts
- arxiv url: http://arxiv.org/abs/2606.17468v1
- Date: Tue, 16 Jun 2026 03:29:23 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-17 17:15:32.246753
- Title: RSRank: Learning Relevance from Representational Shifts
- Title(参考訳): RSRank: 表現のシフトから学ぶ
- Authors: Archit Gupta, Sai Sundaresan, Debabrata Mahapatra,
- Abstract要約: 関連度スコアの校正を行うため,予測RSを学習する軽量なトレーニングフレームワークを導入する。
トレーニングの目的は、無関係なコンテンツをゼロしきい値で自然にフィルタリングし、依存調整を減らすことである。
- 参考スコア(独自算出の注目度): 2.996596877662786
- License: http://creativecommons.org/licenses/by-nc-nd/4.0/
- Abstract: As enterprises deploy RAG-based systems to provide grounded responses to user queries, reranking has become a critical component for the final filtering step that separates relevant from distracting or irrelevant documents. Existing rerankers often rely on heuristic thresholds to achieve optimal filtering. Moreover, for relevance scoring, state-of-the-art methods use a language model's logit signals, which are designed for next-token prediction, not for assessing relevance. To address these limitations, we identify a principled signal for relevance: the representational shift (RS) induced in a query's internal state when conditioned on a document. We observe that the alignment between (a) RS induced by a candidate document and (b) RS induced by an oracle document-set provides a robust indicator of relevance. Building on this insight, we introduce a lightweight training framework that learns projections mapping RS to calibrated relevance scores. Our training objectives naturally filter irrelevant content at a zero threshold, reducing dependence on heuristic tuning. Across diverse retrieval datasets, our method delivers gains over SOTA rerankers.
- Abstract(参考訳): 企業がRAGベースのシステムをデプロイして、ユーザクエリに接地した応答を提供するようになると、リランクは最後のフィルタリングステップにおいて重要な要素となり、混乱や無関係なドキュメントから分離される。
既存のリランカーはしばしば最適なフィルタリングを達成するためにヒューリスティックしきい値に依存する。
さらに、関連性を評価するために、最先端の手法は言語モデルのロジット信号を使用し、関連性を評価するためにではなく、次トーケン予測のために設計されている。
これらの制約に対処するため、文書に条件付けされた場合、クエリの内部状態に誘導される表現シフト(RS)という、関連性に関する原理的なシグナルを同定する。
我々は両者の一致を観察する
(a)候補書類によるRS及びRS
b) オラクル文書セットによって誘導されるRSは、関連性の堅牢な指標を提供する。
この知見に基づいて、我々は、RSを校正された妥当性スコアにマッピングするプロジェクションを学習する軽量なトレーニングフレームワークを導入する。
トレーニングの目的は、無関係なコンテンツをゼロしきい値で自然にフィルタリングし、ヒューリスティックなチューニングへの依存を減らすことである。
本手法は,多種多様な検索データセットにまたがって,SOTAリランカに対するゲインを提供する。
関連論文リスト
- ChunkRAG: Novel LLM-Chunk Filtering Method for RAG Systems [2.8692611791027893]
Retrieval-Augmented Generation (RAG) システムは、無関係またはゆるい関連情報の検索によって不正確な応答を生成する。
チャンクレベルで取得した情報を評価・フィルタリングすることでRAGシステムを強化するフレームワークであるChunkRAGを提案する。
論文 参考訳(メタデータ) (2024-10-25T14:07:53Z) - RAGEval: Scenario Specific RAG Evaluation Dataset Generation Framework [66.93260816493553]
本稿では,様々なシナリオにまたがってRAGシステムを評価するためのフレームワークであるRAGvalを紹介する。
事実の正確性に焦点をあてて,完全性,幻覚,不適切性の3つの新しい指標を提案する。
実験結果から, RAGEvalは, 生成した試料の明瞭度, 安全性, 適合性, 豊かさにおいて, ゼロショット法とワンショット法より優れていた。
論文 参考訳(メタデータ) (2024-08-02T13:35:11Z) - ARES: An Automated Evaluation Framework for Retrieval-Augmented Generation Systems [46.522527144802076]
本稿では,RAGシステム評価のための自動RAG評価システムであるARESを紹介する。
ARESは軽量LM判定器を微調整し、個々のRAG成分の品質を評価する。
コードとデータセットをGithubで公開しています。
論文 参考訳(メタデータ) (2023-11-16T00:39:39Z) - Incorporating Relevance Feedback for Information-Seeking Retrieval using
Few-Shot Document Re-Ranking [56.80065604034095]
我々は,クエリとユーザが関連すると考えるドキュメントとの類似性に基づいて,文書を再参照するkNNアプローチを提案する。
異なる統合戦略を評価するため、既存の4つの情報検索データセットを関連フィードバックシナリオに変換する。
論文 参考訳(メタデータ) (2022-10-19T16:19:37Z) - Open-Set Recognition: A Good Closed-Set Classifier is All You Need [146.6814176602689]
分類器が「ゼロ・オブ・ア・ア・ア・ベ」決定を行う能力は、閉集合クラスにおける精度と高い相関関係があることが示される。
この相関を利用して、閉セット精度を向上させることにより、クロスエントロピーOSR'ベースライン'の性能を向上させる。
また、セマンティックノベルティを検出するタスクをより尊重する新しいベンチマークを構築した。
論文 参考訳(メタデータ) (2021-10-12T17:58:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。