論文の概要: Structured Testbench Generation for LLM-Driven HDL Design and Verification-Oriented Data Curation
- arxiv url: http://arxiv.org/abs/2606.12983v1
- Date: Thu, 11 Jun 2026 07:19:41 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-06-12 15:55:27.634205
- Title: Structured Testbench Generation for LLM-Driven HDL Design and Verification-Oriented Data Curation
- Title(参考訳): LLM駆動型HDL設計のための構造化テストベンチ生成と検証指向データキュレーション
- Authors: En-Ming Huang, Yu-Hung Kao, Ren-Hao Deng, Wei-Po Hsin, Yao-Ting Hsieh, Cheng Liang, Hsiang-Yu Tsou, Mu-Chi Chen, Yu-Kai Hung, Shao-Chun Ho, Po-Hsuang Huang, Shih-Hao Hung, H. T. Kung,
- Abstract要約: 本稿では,ハードウェア設計の固有構造を利用して決定論的テストベンチを生成するフレームワークSTGを提案する。
直接検証ツールとして、STGは反復LDMベースのテストベンチ生成フローよりも720倍高速で動作する。
データエンジンとしては、単一のCPUコア上でのLLMベースのフィルタリングよりも11倍高速で、エネルギーは117倍少ない。
- 参考スコア(独自算出の注目度): 1.5686209550078525
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Automated testbench generation has become a critical bottleneck in large language model (LLM)-driven Register Transfer Level (RTL) workflows, where large numbers of candidate designs must be verified rapidly and reliably. Existing prompt-based approaches treat testbench generation as unconstrained code synthesis, yielding stochastic outputs with high token cost, low reproducibility, and insufficient coverage. To address this gap, we present STG, a Structured Testbench Generation framework that exploits the inherent structure of hardware designs to generate deterministic testbenches. As a direct verification tool, STG runs 720x faster than an iterative LLM-based testbench generation flow and higher rate of successful compilation, achieves higher coverage, and reduces false-pass verdicts on incorrect DUTs. STG also helps identify errors in RTL generation benchmarks by exposing faulty benchmark testbenches. As a data curation engine, it is 11x faster than LLM-based filtering on a single CPU core with 127x less energy, and the resulting distilled models provide state-of-the-art performance in our multi-benchmark evaluation. As a test-time scaling oracle, it reduces node count by 14-47\%. Our models are available at https://huggingface.co/collections/AS-SiliconMind/siliconmind-v12.
- Abstract(参考訳): 自動テストベンチ生成は、大規模言語モデル(LLM)駆動のレジスタ転送レベル(RTL)ワークフローにおいて重要なボトルネックとなっている。
既存のプロンプトベースのアプローチでは、テストベンチ生成を制約のないコード合成として扱い、トークンコストが高く、再現性が低く、カバレッジが不十分な確率的出力が得られる。
このギャップに対処するために,ハードウェア設計固有の構造を利用して決定論的テストベンチを生成するStructured Testbench GenerationフレームワークSTGを提案する。
直接検証ツールとして、STGは反復LDMベースのテストベンチ生成フローよりも720倍高速に動作し、高いカバレッジを実現し、不正なDUTに対する偽パス判定を低減している。
STGはまた、欠陥のあるベンチマークテストベンチを公開することで、RTL生成ベンチマークのエラーを特定するのにも役立ちます。
データキュレーションエンジンとして、1つのCPUコア上でのLCMベースのフィルタリングよりも117倍少ないエネルギーで11倍高速であり、得られた蒸留モデルは、マルチベンチマーク評価において最先端の性能を提供する。
テスト時間スケーリングのオラクルとして、ノード数を14-47\%削減する。
私たちのモデルはhttps://huggingface.co/collections/AS-SiliconMind/siliconmind-v12で利用可能です。
関連論文リスト
- RTL-BenchLS: A Large-Scale Benchmark for RTL Reasoning and Generation with Large Language Models [9.379769213324769]
LLMベースのRTL生成と推論は、ハードウェア設計の自動化にとって有望な方向である。
既存のRTLベンチマークは、スケールとタスクスコープの両方に固有の制限に直面している。
両制約に対処する大規模ベンチマークであるRTL-BenchLSを導入する。
論文 参考訳(メタデータ) (2026-06-08T03:21:33Z) - LiveFMBench: Unveiling the Power and Limits of Agentic Workflows in Specification Generation [75.05397479715576]
大規模言語モデル(LLM)とエージェントは有望な進歩を示しているが、その真の能力と失敗モードは未だ不明である。
CプログラムのためのLCMおよびエージェントベースの形式仕様生成に関する、最初の体系的および汚染に配慮した研究を提案する。
論文 参考訳(メタデータ) (2026-05-02T11:31:33Z) - Tiny Inference-Time Scaling with Latent Verifiers [56.696619768584675]
Verifier on Hidden States (VHS) は、Diffusion Transformer (DiT) の中間的な隠れ表現で動作する。
VHSは、画素空間に復号することなくジェネレータ機能を解析することにより、候補毎の検証コストを削減できる。
VHSは同じ推論時予算でGenEvalを+2.7%改善する。
論文 参考訳(メタデータ) (2026-03-23T19:00:02Z) - AlgoVeri: An Aligned Benchmark for Verified Code Generation on Classical Algorithms [54.99368693313797]
既存のベンチマークでは、個々の言語/ツールのみをテストするため、パフォーマンス番号は直接比較できない。
このギャップに対処するAlgoVeriは、Dafny、Verus、Leanで77ドルの古典的アルゴリズムのベリコーディングを評価するベンチマークです。
論文 参考訳(メタデータ) (2026-02-10T06:58:26Z) - ChipBench: A Next-Step Benchmark for Evaluating LLM Performance in AI-Aided Chip Design [15.71144418188142]
大規模言語モデル(LLM)は、ハードウェア工学において大きな可能性を秘めている。
現在のベンチマークでは飽和とタスクの多様性が制限されている。
本稿では,AI支援チップ設計のための総合ベンチマークを提案する。
論文 参考訳(メタデータ) (2026-01-29T09:26:55Z) - dParallel: Learnable Parallel Decoding for dLLMs [77.24184219948337]
拡散大言語モデル(dLLM)は並列トークン予測と低推論遅延を提供する。
既存のオープンソースモデルは、パフォーマンスを確保するためにトークン長のデコードステップをほとんど必要としています。
高速サンプリングのためにdLLMs固有の並列性を解き放つシンプルで効果的な方法であるdParallelを導入する。
論文 参考訳(メタデータ) (2025-09-30T16:32:52Z) - PRO-V: An Efficient Program Generation Multi-Agent System for Automatic RTL Verification [6.983135183126461]
Pro-Vは、堅牢なRTL検証のためのプログラム生成マルチエージェントシステムである。
生成したテストベンチの正しさを高めるため、効率的なn個の反復サンプリング戦略が組み込まれている。
Pro-Vは、黄金のRTL実装では87.17%、RTL変異では76.28%の精度で検証されている。
論文 参考訳(メタデータ) (2025-06-13T20:06:34Z) - Learning to Solve and Verify: A Self-Play Framework for Code and Test Generation [69.62857948698436]
大規模言語モデル(LLM)の最近の進歩は、コーディングベンチマークのパフォーマンスを改善している。
しかし、手軽に利用できる高品質なデータの枯渇により、改善は停滞している。
本稿では,単一モデルのコードとテスト生成能力を共同で改善するセルフプレイ・ソルバ検証フレームワークであるSol-Verを提案する。
論文 参考訳(メタデータ) (2025-02-20T18:32:19Z) - TESTEVAL: Benchmarking Large Language Models for Test Case Generation [15.343859279282848]
大規模言語モデル(LLM)を用いたテストケース生成のための新しいベンチマークであるTESTEVALを提案する。
オンラインプログラミングプラットフォームLeetCodeから210のPythonプログラムを収集し、全体的なカバレッジ、ターゲットライン/ブランチカバレッジ、ターゲットパスカバレッジという3つの異なるタスクを設計します。
特定のプログラム行/ブランチ/パスをカバーするテストケースを生成することは、現在のLLMでは依然として困難である。
論文 参考訳(メタデータ) (2024-06-06T22:07:50Z) - VerilogReader: LLM-Aided Hardware Test Generation [5.012023213660125]
高度な理解と推論機能を備えた大規模言語モデル(LLM)は、新しいアプローチを導入している。
本研究では,LCMをCDG(Coverage Directed Test Generation)プロセスに統合する方法について検討する。
私たちは、自設計のVerilogベンチマークスイートを使用して、ランダムなテストとフレームワークを比較します。
論文 参考訳(メタデータ) (2024-06-03T07:20:51Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。