論文の概要: LeMat-GenBench: A Unified Evaluation Framework for Crystal Generative Models

• arxiv url: http://arxiv.org/abs/2512.04562v1
• Date: Thu, 04 Dec 2025 08:25:16 GMT
• ステータス: 翻訳完了
• システム内更新日: 2025-12-05 21:11:46.067502
• Title: LeMat-GenBench: A Unified Evaluation Framework for Crystal Generative Models
• Title（参考訳）: LeMat-GenBench: 結晶生成モデルのための統一評価フレームワーク
• Authors: Siddharth Betala, Samuel P. Gleason, Ali Ramlaoui, Andy Xu, Georgia Channing, Daniel Levy, Clémentine Fourrier, Nikita Kazeev, Chaitanya K. Joshi, Sékou-Oumar Kaba, Félix Therrien, Alex Hernandez-Garcia, Rocío Mercado, N. M. Anoop Krishnan, Alexandre Duval,
• Abstract要約: 結晶生成モデルの統一ベンチマークであるLeMat-GenBenchを紹介する。 私たちはHugging Face上でオープンソース評価スイートと公開リーダボードをリリースし、最新のジェネレーティブモデル12をベンチマークします。
• 参考スコア（独自算出の注目度）: 39.63407613127808
• License: http://creativecommons.org/licenses/by/4.0/
• Abstract: Generative machine learning (ML) models hold great promise for accelerating materials discovery through the inverse design of inorganic crystals, enabling an unprecedented exploration of chemical space. Yet, the lack of standardized evaluation frameworks makes it challenging to evaluate, compare, and further develop these ML models meaningfully. In this work, we introduce LeMat-GenBench, a unified benchmark for generative models of crystalline materials, supported by a set of evaluation metrics designed to better inform model development and downstream applications. We release both an open-source evaluation suite and a public leaderboard on Hugging Face, and benchmark 12 recent generative models. Results reveal that an increase in stability leads to a decrease in novelty and diversity on average, with no model excelling across all dimensions. Altogether, LeMat-GenBench establishes a reproducible and extensible foundation for fair model comparison and aims to guide the development of more reliable, discovery-oriented generative models for crystalline materials.
• Abstract（参考訳）: 生成機械学習(ML)モデルは、無機結晶の逆設計による材料発見を加速する大きな約束を持ち、前例のない化学空間の探索を可能にしている。 しかし、標準化された評価フレームワークがないため、これらのMLモデルを有意義に評価し、比較し、さらに発展させることは困難である。 本研究では,結晶材料の生成モデルのための統一ベンチマークであるLeMat-GenBenchを紹介する。 私たちはHugging Faceのオープンソース評価スイートと公開リーダボードの両方をリリースし、最新のジェネレーティブモデル12をベンチマークします。 その結果、安定性の向上は、すべての次元にわたって優れたモデルが存在しない平均的な新規性と多様性の低下につながることが明らかとなった。 同様に、LeMat-GenBenchは、公正なモデル比較のための再現可能で拡張可能な基盤を確立し、結晶材料のより信頼性が高く発見指向の生成モデルの開発を導くことを目的としている。

関連論文リスト

• PerturBench: Benchmarking Machine Learning Models for Cellular Perturbation Analysis [8.785345412061792]
  摂動に対する単一細胞転写応答をモデル化するための包括的枠組みを提案する。 私たちのアプローチには、モジュラーでユーザフレンドリなモデル開発と評価プラットフォームが含まれています。 モード崩壊など、広く使われているモデルの限界を強調します。
  論文  参考訳（メタデータ） (2024-08-20T07:40:20Z)
• Data-Juicer Sandbox: A Feedback-Driven Suite for Multimodal Data-Model Co-development [67.55944651679864]
  統合データモデル共同開発に適した新しいサンドボックススイートを提案する。 このサンドボックスは、フィードバック駆動の実験プラットフォームを提供し、コスト効率とデータとモデルの両方のガイド付き洗練を可能にする。
  論文  参考訳（メタデータ） (2024-07-16T14:40:07Z)
• Scalable Diffusion for Materials Generation [99.71001883652211]
  我々は任意の結晶構造(ユニマット)を表現できる統一された結晶表現を開発する。 UniMatはより大型で複雑な化学系から高忠実度結晶構造を生成することができる。 材料の生成モデルを評価するための追加指標を提案する。
  論文  参考訳（メタデータ） (2023-10-18T15:49:39Z)
• Evaluating the diversity and utility of materials proposed by generative models [38.85523285991743]
  本稿では, 逆設計プロセスの一部として, 物理誘導結晶生成モデルという, 最先端の生成モデルを用いる方法を示す。 本研究は, 逆設計を改善するために, 生成モデルをどのように改善するかを示唆する。
  論文  参考訳（メタデータ） (2023-08-09T14:42:08Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。