論文の概要: LegalBench: Prototyping a Collaborative Benchmark for Legal Reasoning
- arxiv url: http://arxiv.org/abs/2209.06120v1
- Date: Tue, 13 Sep 2022 16:11:54 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-14 12:45:10.525174
- Title: LegalBench: Prototyping a Collaborative Benchmark for Legal Reasoning
- Title（参考訳）: LegalBench: 法的推論のためのコラボレーションベンチマークのプロトタイプ
- Authors: Neel Guha, Daniel E. Ho, Julian Nyarko, Christopher R\'e
- Abstract要約: IRAC-法学者が使用するフレームワークは、異なるタイプの法的推論を区別し、ファンデーションモデル指向のベンチマークの構築をガイドする。
このフレームワークに基づいて構築された44のタスクのシードセットを提示する。
初期発見について議論し、新しい課題の方向性を明らかにする。
- 参考スコア（独自算出の注目度）: 9.781870347399062
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Can foundation models be guided to execute tasks involving legal reasoning?
We believe that building a benchmark to answer this question will require
sustained collaborative efforts between the computer science and legal
communities. To that end, this short paper serves three purposes. First, we
describe how IRAC-a framework legal scholars use to distinguish different types
of legal reasoning-can guide the construction of a Foundation Model oriented
benchmark. Second, we present a seed set of 44 tasks built according to this
framework. We discuss initial findings, and highlight directions for new tasks.
Finally-inspired by the Open Science movement-we make a call for the legal and
computer science communities to join our efforts by contributing new tasks.
This work is ongoing, and our progress can be tracked here:
https://github.com/HazyResearch/legalbench.
- Abstract（参考訳）: 基礎モデルは法的推論を伴うタスクを実行するために導かれるか?
この問題に答えるためにベンチマークを構築するには、コンピュータ科学と法的なコミュニティの継続的な協力が必要だと考えています。
そのために、この短い論文は3つの目的がある。
まず、irac-aフレームワークの法学者が様々な種類の法的推論を区別するためにどのように使うかを説明し、基礎モデル指向ベンチマークの構築を導く。
次に、このフレームワークに従って構築された44のタスクのシードセットを示す。
最初の発見について話し、新しいタスクの方向性を強調する。
ついにオープンサイエンス運動に触発されて、私たちは法律とコンピュータサイエンスのコミュニティに、新たなタスクへの貢献を呼びかけました。
この作業は進行中で、進捗状況はこちらで追跡できます。
関連論文リスト
- IL-TUR: Benchmark for Indian Legal Text Understanding and Reasoning [16.12863746776168]
世界中の法制度は、事例や文書の指数的な増加と共に浸水している。
法律文書を自動的に処理し理解するためのNLPおよびML技術を開発する必要がある。
本稿では, IL-TUR: Benchmark for Indian Legal Text Understanding and Reasoningを提案する。
論文 参考訳（メタデータ） (2024-07-07T14:55:04Z) - DELTA: Pre-train a Discriminative Encoder for Legal Case Retrieval via Structural Word Alignment [55.91429725404988]
判例検索のための識別モデルであるDELTAを紹介する。
我々は浅層デコーダを利用して情報ボトルネックを作り、表現能力の向上を目指しています。
本手法は, 判例検索において, 既存の最先端手法よりも優れている。
論文 参考訳（メタデータ） (2024-03-27T10:40:14Z) - Privacy Issues in Large Language Models: A Survey [2.707979363409351]
これは、大規模言語モデル(LLM)におけるプライバシー問題に焦点を当てたAI研究の活発な領域に関する最初の調査である。
私たちは、プライバシのリスクを強調し、トレーニングや推論プロセスにプライバシを構築しようと試み、著作権の問題を軽減するために、レッドチームでモデルを設計する作業に重点を置いています。
論文 参考訳（メタデータ） (2023-12-11T01:26:53Z) - Report of the 1st Workshop on Generative AI and Law [78.62063815165968]
本報告では、生成AIと法に関する第1回ワークショップ(GenLaw)の開催状況について述べる。
コンピュータサイエンスと法学の実践者や学者の学際的なグループが集まり、ジェネレーティブAI法がもたらす技術的、教義的、政策上の課題について議論した。
論文 参考訳（メタデータ） (2023-11-11T04:13:37Z) - LegalBench: A Collaboratively Built Benchmark for Measuring Legal
Reasoning in Large Language Models [15.98468948605927]
LegalBenchは6種類の法的推論をカバーする162のタスクからなるベンチマークである。
本稿では、LegalBenchについて述べるとともに、20のオープンソースおよび商用LCMの実証的な評価を行い、LegalBenchがもたらす研究のタイプについて説明する。
論文 参考訳（メタデータ） (2023-08-20T22:08:03Z) - SAILER: Structure-aware Pre-trained Language Model for Legal Case
Retrieval [75.05173891207214]
判例検索は知的法体系において中心的な役割を果たす。
既存の言語モデルの多くは、異なる構造間の長距離依存関係を理解するのが難しい。
本稿では, LEgal ケース検索のための構造対応プレトランザクショナル言語モデルを提案する。
論文 参考訳（メタデータ） (2023-04-22T10:47:01Z) - Why Should Adversarial Perturbations be Imperceptible? Rethink the
Research Paradigm in Adversarial NLP [83.66405397421907]
セキュリティシナリオにおけるテキスト敵検体の研究パラダイムを再考する。
最初に、セキュリティデータセットコレクションのAdvbenchを収集し、処理し、リリースします。
次に,現実の攻撃手法をシミュレートするために,現実の敵目標を容易に達成できるルールに基づく簡単な手法を提案する。
論文 参考訳（メタデータ） (2022-10-19T15:53:36Z) - Indian Legal NLP Benchmarks : A Survey [0.0]
インド法典テキストのために、別々に自然言語処理ベンチマークを作成する必要がある。
これは、インドの法律テキストに対する自然言語処理の応用の革新を刺激する。
論文 参考訳（メタデータ） (2021-07-13T13:10:10Z) - Lawformer: A Pre-trained Language Model for Chinese Legal Long Documents [56.40163943394202]
我々は,中国法定長文理解のためのLongformerベースの事前学習言語モデル,Lawformerをリリースする。
判決の予測,類似事例の検索,法的読解,法的質問の回答など,さまざまな法務上の課題について法務担当者を評価した。
論文 参考訳（メタデータ） (2021-05-09T09:39:25Z) - How Does NLP Benefit Legal System: A Summary of Legal Artificial
Intelligence [81.04070052740596]
法律人工知能(Legal AI)は、人工知能、特に自然言語処理の技術を適用して、法的領域におけるタスクに役立てることに焦点を当てている。
本稿では,LegalAIにおける研究の歴史,現状,今後の方向性について紹介する。
論文 参考訳（メタデータ） (2020-04-25T14:45:15Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。