Fugu-MT 論文翻訳(概要): Towards Trustworthy Reranking: A Simple yet Effective Abstention Mechanism

論文の概要: Towards Trustworthy Reranking: A Simple yet Effective Abstention Mechanism

arxiv url: http://arxiv.org/abs/2402.12997v5
Date: Wed, 25 Sep 2024 14:37:39 GMT
ステータス: 処理完了
システム内更新日: 2024-11-09 04:32:42.398272
Title: Towards Trustworthy Reranking: A Simple yet Effective Abstention Mechanism
Title（参考訳）: 信頼できる再評価に向けて - シンプルだが効果的な回避メカニズム
Authors: Hippolyte Gisserot-Boukhlef, Manuel Faysse, Emmanuel Malherbe, Céline Hudelot, Pierre Colombo,
Abstract要約: 実世界の制約に合わせた軽量な禁制機構を提案する。ブラックボックスシナリオにおける禁忌戦略を評価するためのプロトコルを提案する。実験複製と禁忌実装のためのオープンソースコードを提供する。
参考スコア（独自算出の注目度）: 15.197178797284808
License: http://creativecommons.org/publicdomain/zero/1.0/
Abstract: Neural Information Retrieval (NIR) has significantly improved upon heuristic-based Information Retrieval (IR) systems. Yet, failures remain frequent, the models used often being unable to retrieve documents relevant to the user's query. We address this challenge by proposing a lightweight abstention mechanism tailored for real-world constraints, with particular emphasis placed on the reranking phase. We introduce a protocol for evaluating abstention strategies in black-box scenarios (typically encountered when relying on API services), demonstrating their efficacy, and propose a simple yet effective data-driven mechanism. We provide open-source code for experiment replication and abstention implementation, fostering wider adoption and application in diverse contexts.
Abstract（参考訳）: ニューラル情報検索 (NIR) はヒューリスティックベースの情報検索 (IR) システムで大幅に改善されている。しかし、失敗は頻繁であり、使用されていたモデルは、ユーザのクエリに関連するドキュメントを取得できないことが多い。我々は、現実世界の制約に合わせた軽量な禁制機構を提案することで、この問題に対処する。ブラックボックスシナリオ(一般的にAPIサービスに依存している場合に発生する)における禁忌戦略を評価するためのプロトコルを導入し、その有効性を実証し、シンプルで効果的なデータ駆動機構を提案する。我々は、様々な状況下で広く採用され応用されるように、実験的なレプリケーションと禁忌実装のためのオープンソースコードを提供しています。

関連論文リスト

Fast or Better? Balancing Accuracy and Cost in Retrieval-Augmented Generation with Flexible User Control [52.405085773954596]
Retrieval-Augmented Generation (RAG) は、大規模言語モデル幻覚を緩和するための強力なアプローチとして登場した。既存のRAGフレームワークは、しばしば無差別に検索を適用し、非効率な再検索につながる。本稿では,精度・コストのトレードオフを動的に調整できる新しいユーザ制御可能なRAGフレームワークを提案する。
論文参考訳（メタデータ） (2025-02-17T18:56:20Z)
ReReLRP - Remembering and Recognizing Tasks with LRP [9.317606100792846]
ReReLRPは、ディープニューラルネットワークにおける破滅的忘れに対する新しい解決策である。当社のコントリビューションは,既存のリプレイフリーメソッドのプライバシの向上に加えて,ビルトインの説明性も提供しています。提案手法を多種多様なデータセットで検証し、選択したシナリオでよく知られたリプレイ方式に匹敵する結果を実証する。
論文参考訳（メタデータ） (2025-02-15T13:03:59Z)
Stream-Based Monitoring of Algorithmic Fairness [4.811789437743092]
ストリームベースのモニタリングは,実行時の決定と予測システムのアルゴリズム的公正性を検証するためのソリューションとして提案されている。本稿では,仕様言語 RTLola における時空間データストリームに対するアルゴリズム的公正性を定式化する方法を提案する。
論文参考訳（メタデータ） (2025-01-30T13:18:59Z)
Hierarchical Reinforcement Learning for Temporal Abstraction of Listwise Recommendation [51.06031200728449]
我々はmccHRLと呼ばれる新しいフレームワークを提案し、リストワイドレコメンデーションにおける時間的抽象化のレベルを異なるものにする。階層的な枠組みの中では、ハイレベルエージェントがユーザ知覚の進化を研究し、低レベルエージェントがアイテム選択ポリシーを作成している。その結果,本手法による性能改善は,いくつかのよく知られたベースラインと比較して有意な結果が得られた。
論文参考訳（メタデータ） (2024-09-11T17:01:06Z)
Fast Explanations via Policy Gradient-Optimized Explainer [7.011763596804071]
本稿では,確率分布による帰属に基づく説明を表現する新しい枠組みを提案する。提案するフレームワークは、リアルタイムで大規模なモデル説明のための堅牢でスケーラブルなソリューションを提供する。画像とテキストの分類作業におけるフレームワークの有効性を検証するとともに,提案手法は推論時間を97%以上削減し,メモリ使用量を70%以上削減することを示した。
論文参考訳（メタデータ） (2024-05-29T00:01:40Z)
Re-thinking Data Availablity Attacks Against Deep Neural Networks [53.64624167867274]
本稿では、未学習例の概念を再検討し、既存のロバストな誤り最小化ノイズが不正確な最適化目標であることを示す。本稿では,計算時間要件の低減による保護性能の向上を図った新しい最適化パラダイムを提案する。
論文参考訳（メタデータ） (2023-05-18T04:03:51Z)
Uncertainty-Aware Instance Reweighting for Off-Policy Learning [63.31923483172859]
本研究では,不確実性を考慮した逆確率スコア推定器 (UIPS) を提案する。実世界の3つのレコメンデーションデータセットを用いた実験結果から,提案したUIPS推定器の有効サンプル効率が示された。
論文参考訳（メタデータ） (2023-03-11T11:42:26Z)
Toward Certified Robustness Against Real-World Distribution Shifts [65.66374339500025]
我々は、データから摂動を学ぶために生成モデルを訓練し、学習したモデルの出力に関して仕様を定義する。この設定から生じるユニークな挑戦は、既存の検証者がシグモイドの活性化を厳密に近似できないことである。本稿では,古典的な反例誘導的抽象的洗練の概念を活用するシグモイドアクティベーションを扱うための一般的なメタアルゴリズムを提案する。
論文参考訳（メタデータ） (2022-06-08T04:09:13Z)
Aurora Guard: Reliable Face Anti-Spoofing via Mobile Lighting System [103.5604680001633]
紙写真やデジタルビデオの高解像度レンダリングリプレイに対する反偽造は、未解決の問題だ。オーロラガード(Aurora Guard, AG)と呼ばれる, シンプルだが効果的な顔保護システムを提案する。
論文参考訳（メタデータ） (2021-02-01T09:17:18Z)
Active recursive Bayesian inference using R\'enyi information measures [11.1748531496641]
本稿では,統合された推論とクエリ選択ステップを備えたベイズ推論フレームワークを提案する。提案手法が相互情報などの従来の手法より優れていることを示す。本稿では,レストランレコメンデーションとブレイン・コンピュータ・インタフェース(BCI)タイピングシステムの2つの応用に関する実証的および実験的性能評価を行う。
論文参考訳（メタデータ） (2020-04-07T05:52:58Z)
Towards Probabilistic Verification of Machine Unlearning [30.892906429582904]
本稿では,データ削除要求に対する検証機構の設計について研究する形式的枠組みを提案する。提案手法は,機械学習サービスの精度に最小限の影響を与えるが,未学習に対する信頼性の高い検証を可能にする。
論文参考訳（メタデータ） (2020-03-09T16:39:46Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。