論文の概要: An LLM-Based Agent for Legal Compliance Assessment: Architecture, Memory, and Evaluation in a Canadian and Quebec Context
- arxiv url: http://arxiv.org/abs/2610.27347v1
- Date: Mon, 19 Oct 2026 22:24:34 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-10-21 21:58:47.533085
- Title: An LLM-Based Agent for Legal Compliance Assessment: Architecture, Memory, and Evaluation in a Canadian and Quebec Context
- Title(参考訳): LLMに基づく法律コンプライアンス評価エージェント:カナダとケベックの文脈におけるアーキテクチャ、記憶、評価
- Abstract要約: 本稿では,デジタル主権,炭素の影響,コンプライアンス,倫理という4つの軸に沿ったテキストを評価するフレームワークであるComplianceAgentを提案する。
エージェントは、固定されたルーリックのテキストをスコアし、基準法定コーパスで判断を下し、スコアが臨界しきい値以下になると、自己修復による修正連鎖を実行する。
カナダとケベックの文脈でエージェントを評価し、連邦および地方文書、国際条約、およびトロイス・リビレス市の自治体文書をまとめる13の法的手段のコーパスで評価する。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Checking whether a text complies with a body of law is slow when done by hand and fragile when done with keyword rules. This paper presents ComplianceAgent, the legal compliance sub-agent of COMPASS, a multi-agent framework that evaluates texts along four axes: digital sovereignty, carbon impact, compliance, and ethics. The agent relies on a large language model that scores a text on a fixed rubric, grounds its judgment in a reference legal corpus, and, when the score falls at or below a critical threshold, runs a corrective chain made of self-healing rewrites, a compliance label, an explainability report, and escalation to a human reviewer. We describe what the language model does at each step, how the memory of the agent is organized, and how the same implementation can be pointed at different reference corpora. We evaluate the agent in a Canadian and Quebec context, on a corpus of thirteen legal instruments that brings together federal and provincial texts, international treaties, and municipal documents of the City of Trois-Rivières. The evaluation relies on a hand-annotated gold standard of fifteen texts and combines classification metrics, a repeated-query stability test, retrieval precision, and a composite score. On this gold standard the agent separates every conforming text from every non-conforming one, its scores remain stable under repeated queries, and the index returns relevant passages.
- Abstract(参考訳): テキストが法体に準拠するかどうかを確認することは、手作業では遅く、キーワードルールでは脆弱である。
本稿では、デジタル主権、炭素影響、コンプライアンス、倫理という4つの軸に沿ったテキストを評価するマルチエージェントフレームワークであるCompASSの法的コンプライアンスサブエージェントであるComplianceAgentについて述べる。
エージェントは、固定されたルーリック上のテキストをスコアし、基準法定コーパスで判断を下し、スコアが臨界しきい値以下になると、自己修復リライト、コンプライアンスラベル、説明可能性レポート、人間レビュアーへのエスカレーションからなる補正チェーンを実行する。
それぞれのステップで言語モデルが何をするか、エージェントのメモリがどのように構成され、同じ実装が異なる参照コーパスにどのように向けられるかを説明します。
カナダとケベックの文脈でエージェントを評価し、連邦および地方文書、国際条約、およびトロイス・リビエール市の自治体文書をまとめる13の法的手段のコーパスで評価する。
この評価は15テキストの手書きゴールド標準に依存しており、分類基準、繰り返しクエリ安定性試験、検索精度、複合スコアを組み合わせている。
このゴールド標準では、エージェントはすべてのコンフォーミングテキストを非コンフォーミングテキストから切り離し、そのスコアは繰り返しクエリの下で安定であり、インデックスは関連するパスを返す。
関連論文リスト
- PRISM-RAG: Multimodal Hypergraph Retrieval-Augmented Generation for Tobacco Product and Legislative Policy Reasoning [12.945798371353412]
NicoPRISMは161,563枚の画像、キャプション、製品に関する知識ベース、13の米国司法管轄区域にまたがる健康立法文書、および1,495件の質疑応答対で構成されている。
PRISM-RAGは、画像、キャプション、エンティティの上に構築されたハイパーグラフRAGフレームワークで、LLMコールをインデックス時に含まない。
論文 参考訳(メタデータ) (2026-09-20T17:39:21Z) - PRecG: Legal Precedent Retrieval with Graph Neural Networks and Rhetorical Role Segmentation [4.879930398426088]
判例検索は、訴訟準備、計画、訴訟戦略、法的研究における基本的な課題である。
文書を低次元のセマンティック空間にマッピングし、それらの表現の近接性に基づいて類似性を計算する。
本稿では,その表現を階層的に学習することで,法的な判断のペア間の類似性を計算するPRecGパイプラインを提案する。
論文 参考訳(メタデータ) (2026-07-10T04:35:04Z) - JUÁ -- A Benchmark for Information Retrieval in Brazilian Legal Text Collections [3.6360100966162787]
ポルトガル語の法的な情報検索は、利用可能なデータセットが文書タイプ、クエリスタイル、関連性定義で大きく異なるため、体系的に評価することが依然として困難である。
我々はブラジルの法定検索のための公開ベンチマークであるJUを、異種法定コレクション間でより再現性が高く、同等の評価をサポートするように設計された。
論文 参考訳(メタデータ) (2026-04-07T17:10:54Z) - LegalSeg: Unlocking the Structure of Indian Legal Judgments Through Rhetorical Role Classification [6.549338652948716]
7000以上の文書と140万の文で構成され、7つの修辞的な役割をラベル付けした、このタスクのための最大の注釈付きデータセットであるLegalSegを紹介します。
以上の結果から,より広義の文脈,構造的関係,逐次的な文情報を含むモデルが,文レベルの特徴にのみ依存するモデルよりも優れていることが示された。
論文 参考訳(メタデータ) (2025-02-09T10:07:05Z) - The Use of Readability Metrics in Legal Text: A Systematic Literature Review [3.439579933384111]
言語的複雑性は、読者が経験した困難に重要な貢献をする。
ドキュメント可読性を測定するために、ドキュメント可読性メトリクスが開発された。
すべての法的ドメインが可読性メトリクスの観点でよく表現されているわけではない。
論文 参考訳(メタデータ) (2024-11-14T15:04:17Z) - Localizing Factual Inconsistencies in Attributable Text Generation [74.11403803488643]
本稿では,帰属可能なテキスト生成における事実の不整合をローカライズするための新しい形式であるQASemConsistencyを紹介する。
QASemConsistencyは、人間の判断とよく相関する事実整合性スコアを得られることを示す。
論文 参考訳(メタデータ) (2024-10-09T22:53:48Z) - PROXYQA: An Alternative Framework for Evaluating Long-Form Text Generation with Large Language Models [72.57329554067195]
ProxyQAは、長文生成を評価するための革新的なフレームワークである。
さまざまなドメインにまたがる詳細なヒューマンキュレートされたメタクエストで構成されており、それぞれに事前にアノテートされた回答を持つ特定のプロキシクエストが伴っている。
プロキシクエリに対処する際の評価器の精度を通じて、生成されたコンテンツの品質を評価する。
論文 参考訳(メタデータ) (2024-01-26T18:12:25Z) - Not All Metrics Are Guilty: Improving NLG Evaluation by Diversifying References [123.39034752499076]
Div-Refは、参照数を増やして評価ベンチマークを強化する方法である。
本研究では,参照表現の多様化が自動評価と人的評価の相関性を大幅に向上させることを示す実験を行った。
論文 参考訳(メタデータ) (2023-05-24T11:53:29Z) - End-to-End Page-Level Assessment of Handwritten Text Recognition [69.55992406968495]
HTRシステムは、文書のエンドツーエンドのページレベルの書き起こしに直面している。
標準メトリクスは、現れる可能性のある不整合を考慮していない。
本稿では、転写精度とROの良さを別々に検討する2つの評価法を提案する。
論文 参考訳(メタデータ) (2023-01-14T15:43:07Z) - GO FIGURE: A Meta Evaluation of Factuality in Summarization [131.1087461486504]
本稿では,現実性評価指標を評価するメタ評価フレームワークGO FIGUREを紹介する。
10個の実測値のベンチマーク分析により、我々のフレームワークが堅牢で効率的な評価を提供することが明らかとなった。
また、QAメトリクスは、ドメイン間の事実性を測定する標準的なメトリクスよりも一般的に改善されているが、パフォーマンスは、質問を生成する方法に大きく依存していることも明らかにしている。
論文 参考訳(メタデータ) (2020-10-24T08:30:20Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。