論文の概要: Climate Finance Bench
- arxiv url: http://arxiv.org/abs/2505.22752v1
- Date: Wed, 28 May 2025 18:12:29 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-05-30 18:14:07.466058
- Title: Climate Finance Bench
- Title(参考訳): 気候金融ベンチ
- Authors: Rafik Mankour, Yassine Chafai, Hamada Saleh, Ghassen Ben Hassine, Thibaud Barreau, Peter Tankov,
- Abstract要約: 気候ファイナンス・ベンチは、大規模言語モデルを用いた企業気候の開示に関する質問に答えるためのオープンベンチマークを導入した。
我々は、11のGICSセクターにまたがる企業から引き出された英語の持続可能性に関する最近の33のレポートをキュレートする。
回答を実際に含んでいるパスを検索する能力が主なパフォーマンスボトルネックであることを示す。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Climate Finance Bench introduces an open benchmark that targets question-answering over corporate climate disclosures using Large Language Models. We curate 33 recent sustainability reports in English drawn from companies across all 11 GICS sectors and annotate 330 expert-validated question-answer pairs that span pure extraction, numerical reasoning, and logical reasoning. Building on this dataset, we propose a comparison of RAG (retrieval-augmented generation) approaches. We show that the retriever's ability to locate passages that actually contain the answer is the chief performance bottleneck. We further argue for transparent carbon reporting in AI-for-climate applications, highlighting advantages of techniques such as Weight Quantization.
- Abstract(参考訳): 気候ファイナンス・ベンチは、大規模言語モデルを用いた企業気候の開示に関する質問に答えるためのオープンベンチマークを導入した。
我々は、11のGICSセクターにまたがる企業から引き出された英語の持続可能性に関する33のレポートを、純粋抽出、数値推論、論理的推論にまたがる330のエキスパート検証された質問応答ペアにまとめる。
このデータセットに基づいて、RAG(retrieval-augmented generation)アプローチの比較を提案する。
回答を実際に含んでいるパスを検索する能力が主なパフォーマンスボトルネックであることを示す。
さらに我々は、AI-to-climateアプリケーションにおける透過的なカーボンレポートについて論じ、ウェイト量子化のような手法の利点を強調している。
関連論文リスト
- Climate-Eval: A Comprehensive Benchmark for NLP Tasks Related to Climate Change [2.8680187920555635]
Climate-Evalは、既存のデータセットと、新たに開発されたニュース分類データセットを集約する。
この結果、13のデータセットに基づいた25のタスクのベンチマークが、気候談話の重要な側面をカバーしている。
論文 参考訳(メタデータ) (2025-05-24T11:45:46Z) - Beyond the Destination: A Novel Benchmark for Exploration-Aware Embodied Question Answering [87.76784654371312]
Embodied Question Answeringでは、エージェントが動的に3D環境を探索し、視覚情報を積極的に収集し、質問に答えるために多段階の推論を行う必要がある。
既存のデータセットはしばしばバイアスや事前の知識を導入し、非身体的推論につながる。
探索能力と推論能力の両方を評価するために特別に設計された最大のデータセットを構築します。
論文 参考訳(メタデータ) (2025-03-14T06:29:47Z) - Climate AI for Corporate Decarbonization Metrics Extraction [7.522638089716454]
コーポレートデカーボライズメトリックス抽出(CAI)モデルとパイプラインについて紹介する。
本研究では, 企業公開情報からのデータキュレーション, 検証, 評価を自動化することにより, データの収集効率と精度を向上させることを実証する。
論文 参考訳(メタデータ) (2024-11-05T18:37:51Z) - ClimRetrieve: A Benchmarking Dataset for Information Retrieval from Corporate Climate Disclosures [3.348779089844034]
本研究は,持続可能性分析の典型的な課題を,気候に関する詳細な16の質問を含む30のサステナビリティレポートを用いてシミュレートする。
異なるレベルの関連性によってラベル付けされた8.5K以上のユニークな質問ソースと回答のペアを持つデータセットを得る。
本研究は,知識を組み込んだ情報検索における専門家の知識の統合を検討するために,データセットを用いたユースケースを開発する。
論文 参考訳(メタデータ) (2024-06-14T08:21:42Z) - CSPRD: A Financial Policy Retrieval Dataset for Chinese Stock Market [61.59326951366202]
我々は、中国株式政策検索データセット(CSPRD)を導入して、新たな課題である政策検索を提案する。
CSPRDは、中国の政策コーパスの10k以上の項目から、経験豊富な専門家によってラベル付けされた700以上のパスを提供する。
我々の最高のパフォーマンスベースラインは56.1% MRR@10、28.5% NDCG@10、37.5% Recall@10、80.6% Precision@10である。
論文 参考訳(メタデータ) (2023-09-08T15:40:54Z) - Towards Answering Climate Questionnaires from Unstructured Climate
Reports [26.036105166376284]
活動家や政策立案者は、巨大で急速に成長する非構造的気候レポートを構造化形式に処理するためにNLPツールを必要としている。
2つの大規模気候調査データセットを導入し、既存の構造を用いて自己教師型モデルを訓練する。
次に、これらのモデルを用いて、人間のパイロット実験において、構造化されていない気候文書からのテキストと半構造化されたアンケートとの整合を支援する。
論文 参考訳(メタデータ) (2023-01-11T00:22:56Z) - Discovering Airline-Specific Business Intelligence from Online Passenger
Reviews: An Unsupervised Text Analytics Approach [3.2872586139884623]
航空は豊富なオンライン顧客レビュー(OCR)に乗じることができる
本稿では,教師なしテキスト分析手法を用いてocrから企業および競合企業固有の知性を検出する。
提案手法の検証には,米国拠点のターゲットキャリアの99,147件の航空会社レビューと,その競合企業4社のケーススタディが使用されている。
論文 参考訳(メタデータ) (2020-12-14T23:09:10Z) - Analyzing Sustainability Reports Using Natural Language Processing [68.8204255655161]
近年、企業は環境への影響を緩和し、気候変動の状況に適応することを目指している。
これは、環境・社会・ガバナンス(ESG)の傘下にある様々な種類の気候リスクと暴露を網羅する、ますます徹底した報告を通じて報告されている。
本稿では,本稿で開発したツールと方法論について紹介する。
論文 参考訳(メタデータ) (2020-11-03T21:22:42Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。