論文の概要: Identification of Regulatory Requirements Relevant to Business
Processes: A Comparative Study on Generative AI, Embedding-based Ranking,
Crowd and Expert-driven Methods
- arxiv url: http://arxiv.org/abs/2401.02986v1
- Date: Tue, 2 Jan 2024 12:08:31 GMT
- ステータス: 処理完了
- システム内更新日: 2024-01-15 09:35:24.933781
- Title: Identification of Regulatory Requirements Relevant to Business
Processes: A Comparative Study on Generative AI, Embedding-based Ranking,
Crowd and Expert-driven Methods
- Title(参考訳): ビジネスプロセスに関連する規制要件の同定:生成AI、埋め込み型ランキング、集団およびエキスパート駆動手法の比較研究
- Authors: Catherine Sai, Shazia Sadiq, Lei Han, Gianluca Demartini, Stefanie
Rinderle-Ma
- Abstract要約: この研究は、法的およびドメインの専門家が関連する要件を評価するのにどのように役立つかを調べる。
我々は,組込み型NLPランキング法,GPT-4を用いた生成AI法,クラウドソーシング手法を,専門家によるラベル作成の純粋手作業手法と比較した。
BPMN2.0プロセスの両方に対してゴールドスタンダードが作成され、複数の規制文書から現実の要求にマッチします。
- 参考スコア(独自算出の注目度): 10.899912290518648
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Organizations face the challenge of ensuring compliance with an increasing
amount of requirements from various regulatory documents. Which requirements
are relevant depends on aspects such as the geographic location of the
organization, its domain, size, and business processes. Considering these
contextual factors, as a first step, relevant documents (e.g., laws,
regulations, directives, policies) are identified, followed by a more detailed
analysis of which parts of the identified documents are relevant for which step
of a given business process. Nowadays the identification of regulatory
requirements relevant to business processes is mostly done manually by domain
and legal experts, posing a tremendous effort on them, especially for a large
number of regulatory documents which might frequently change. Hence, this work
examines how legal and domain experts can be assisted in the assessment of
relevant requirements. For this, we compare an embedding-based NLP ranking
method, a generative AI method using GPT-4, and a crowdsourced method with the
purely manual method of creating relevancy labels by experts. The proposed
methods are evaluated based on two case studies: an Australian insurance case
created with domain experts and a global banking use case, adapted from SAP
Signavio's workflow example of an international guideline. A gold standard is
created for both BPMN2.0 processes and matched to real-world textual
requirements from multiple regulatory documents. The evaluation and discussion
provide insights into strengths and weaknesses of each method regarding
applicability, automation, transparency, and reproducibility and provide
guidelines on which method combinations will maximize benefits for given
characteristics such as process usage, impact, and dynamics of an application
scenario.
- Abstract(参考訳): 組織は、さまざまな規制文書からの要求の増加に対応するという課題に直面しています。
どの要件が関連するかは、組織の地理的な位置、ドメイン、サイズ、ビジネスプロセスといった側面に依存します。
最初のステップとして、これらの文脈的要因を考慮すると、関連する文書(例えば、法律、規則、指令、ポリシー)を識別し、続いて、特定された文書のどの部分が特定のビジネスプロセスのどのステップに関連しているかをより詳細に分析する。
今日では、ビジネスプロセスに関連する規制要件の特定は、主にドメインや法律の専門家によって手作業で行われ、特に頻繁な変更の可能性のある多数の規制文書に対して非常に努力している。
そこで本研究では,法律専門家とドメイン専門家が関連する要件の評価においてどのように支援できるかを検討する。
そこで,本研究では,組込み型nlpランキング法,gpt-4を用いた生成型ai法,クラウドソース法と専門家による関係ラベル作成のための純粋マニュアル法を比較した。
提案手法は,SAPシグナビオの国際ガイドラインのワークフロー例から,ドメインの専門家によるオーストラリア保険とグローバルバンキングのユースケースの2つのケーススタディに基づいて評価された。
BPMN2.0プロセスの両方に対してゴールドスタンダードが作成され、複数の規制文書から現実のテキスト要求にマッチします。
評価と議論は、適用性、自動化、透明性、再現性に関する各メソッドの長所と短所に関する洞察を提供し、アプリケーションシナリオのプロセス利用、影響、ダイナミクスなど、所定の特性に対する利点を最大化する方法の組み合わせに関するガイドラインを提供する。
関連論文リスト
- Three Decades of Formal Methods in Business Process Compliance: A Systematic Literature Review [0.0]
デジタル化の取り組みは、しばしば重要な課題に直面している。
本研究は,コンプライアンスの検証や保証に形式的手法を用いた厳密なフレームワークに焦点を当てる。
論文 参考訳(メタデータ) (2024-10-13T21:19:57Z) - Towards an Enforceable GDPR Specification [49.1574468325115]
プライバシ・バイ・デザイン(PbD)は、EUなどの現代的なプライバシー規制によって規定されている。
PbDを実現する1つの新しい技術は強制(RE)である
法律規定の正式な仕様を作成するための一連の要件と反復的な方法論を提示する。
論文 参考訳(メタデータ) (2024-02-27T09:38:51Z) - Leveraging Large Language Models for Topic Classification in the Domain
of Public Affairs [65.9077733300329]
大規模言語モデル (LLM) は公務員文書の分析を大幅に強化する可能性を秘めている。
LLMは、公共の分野など、ドメイン固有のドキュメントを処理するのに非常に役立ちます。
論文 参考訳(メタデータ) (2023-06-05T13:35:01Z) - Flexible categorization for auditing using formal concept analysis and
Dempster-Shafer theory [55.878249096379804]
我々は、異なる金融口座に対する異なる利息の程度に応じて分類する様々な方法を研究する。
本稿で開発したフレームワークは,説明可能な分類の獲得と研究のための公式な基盤を提供する。
論文 参考訳(メタデータ) (2022-10-31T13:49:16Z) - Towards a multi-stakeholder value-based assessment framework for
algorithmic systems [76.79703106646967]
我々は、価値間の近さと緊張を可視化する価値に基づくアセスメントフレームワークを開発する。
我々は、幅広い利害関係者に評価と検討のプロセスを開放しつつ、それらの運用方法に関するガイドラインを提示する。
論文 参考訳(メタデータ) (2022-05-09T19:28:32Z) - GERE: Generative Evidence Retrieval for Fact Verification [57.78768817972026]
本稿では,ジェネレーション方式で証拠を検索する最初のシステムであるGEREを提案する。
FEVERデータセットの実験結果は、GEREが最先端のベースラインよりも大幅に改善されていることを示している。
論文 参考訳(メタデータ) (2022-04-12T03:49:35Z) - Trustworthy Artificial Intelligence and Process Mining: Challenges and
Opportunities [0.8602553195689513]
プロセスマイニングは、AIコンプライアンスプロセスの実行に事実に基づく可視性を得るために有用なフレームワークを提供することができることを示す。
AI規制コンプライアンスプロセスの不確実性を分析し、修正し、監視する自動化アプローチを提供する。
論文 参考訳(メタデータ) (2021-10-06T12:50:47Z) - Regulatory Compliance through Doc2Doc Information Retrieval: A case
study in EU/UK legislation where text similarity has limitations [6.40476282000118]
REG-IRは文書間情報検索の応用である。
領域内分類タスクにおけるBERTモデルの微調整は、IRにとって最良の表現であることを示す。
また,矛盾する監督,すなわち類似のクエリ文書対と反対のラベルの組み合わせにより,神経再ランク付けが過小評価されることを示した。
論文 参考訳(メタデータ) (2021-01-26T11:38:15Z) - Towards a Formal Framework for Partial Compliance of Business Processes [0.5156484100374059]
本稿では、さまざまな抽象化レベルにわたるビジネスプロセスのコンプライアンスレベルを定量化するための評価フレームワークを定式化する。
このアプローチは、地方、州、連邦政府が提供する社会サービスをより柔軟にし、市民の生活を改善することで、社会的価値を高めることもできる。
論文 参考訳(メタデータ) (2020-12-24T12:38:40Z) - Extracting Procedural Knowledge from Technical Documents [1.0773368566852943]
手続きは、自動化、質問応答、会話の推進のために認知アシスタントが活用できる文書の重要な知識コンポーネントである。
プロダクトマニュアルやユーザガイドといった巨大なドキュメントを解析して,どの部分でプロシージャについて話しているのかを自動的に理解し,それを抽出することは,非常に難しい問題です。
論文 参考訳(メタデータ) (2020-10-20T09:47:52Z) - A Methodology for Creating AI FactSheets [67.65802440158753]
本稿では、FactSheetsと呼ぶAIドキュメントの形式を作るための方法論について述べる。
方法論の各ステップの中で、検討すべき問題と探求すべき質問について説明する。
この方法論は、透明なAIドキュメントの採用を加速する。
論文 参考訳(メタデータ) (2020-06-24T15:08:59Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。