論文の概要: GenomeQA: Benchmarking General Large Language Models for Genome Sequence Understanding
- arxiv url: http://arxiv.org/abs/2604.05774v1
- Date: Tue, 07 Apr 2026 12:14:20 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-08 17:42:09.808079
- Title: GenomeQA: Benchmarking General Large Language Models for Genome Sequence Understanding
- Title(参考訳): GenomeQA:ゲノム配列理解のための一般的な大規模言語モデルのベンチマーク
- Abstract要約: GenomeQAは、シーケンスベースのゲノム推論タスクにおける汎用LSMの制御された評価設定を提供するために設計されたベンチマークである。
モデルは常にランダムなベースラインより優れており、GC内容やショートモチーフなどの局所的なシーケンス信号を利用することができる。
GenomeQAは、汎用LSMを生ゲノム配列で研究・改善するための診断基準を確立する。
- 参考スコア(独自算出の注目度): 6.678941174236651
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: Large Language Models (LLMs) are increasingly adopted as conversational assistants in genomics, where they are mainly used to reason over biological knowledge, annotations, and analysis outputs through natural language interfaces. However, existing benchmarks either focus on specialized DNA models trained for sequence prediction or evaluate biological knowledge using text-only questions, leaving the behavior of general-purpose LLMs when directly exposed to raw genome sequences underexplored. We introduce GenomeQA, a benchmark designed to provide a controlled evaluation setting for general-purpose LLMs on sequence-based genome inference tasks. GenomeQA comprises 5,200 samples drawn from multiple biological databases, with sequence lengths ranging from 6 to 1,000 base pairs (bp), spanning six task families: Enhancer and Promoter Identification, Splice Site Identification, Taxonomic Classification, Histone Mark Prediction, Transcription Factor Binding Site Prediction, and TF Motif Prediction. Across six frontier LLMs, we find that models consistently outperform random baselines and can exploit local sequence signals such as GC content and short motifs, while performance degrades on tasks that require more indirect or multi-step inference over sequence patterns. GenomeQA establishes a diagnostic benchmark for studying and improving the use of general-purpose LLMs on raw genomic sequences.
- Abstract(参考訳): 大規模言語モデル(LLM)は、生物の知識、アノテーション、そして自然言語インタフェースによる分析出力の推論に主に使用されるゲノム学における会話アシスタントとして、ますます採用されている。
しかし、既存のベンチマークでは、配列予測のために訓練された専門的なDNAモデルや、テキストのみの質問を用いた生物学的知識の評価に焦点が当てられている。
我々は、シーケンスベースのゲノム推論タスクにおける汎用LLMの制御された評価設定を提供するために設計されたベンチマークであるGenomeQAを紹介する。
GenomeQAは、複数の生物データベースから抽出された5,200のサンプルからなり、配列の長さは6つのタスクファミリー(エンハンサーとプロモーター同定、スプライスサイト同定、分類学的分類、ヒストンマーク予測、転写因子結合部位予測、TFモチーフ予測)にまたがっている。
6つのフロンティア LLM にまたがって、モデルがランダムベースラインを一貫して上回り、GC内容やショートモチーフなどの局所的なシーケンス信号を利用することができるのに対し、パフォーマンスは、シーケンスパターンよりも間接的あるいは多段階の推論を必要とするタスクで劣化する。
GenomeQAは、汎用LSMを生ゲノム配列で研究・改善するための診断基準を確立する。
関連論文リスト
- Lost in Tokenization: Context as the Key to Unlocking Biomolecular Understanding in Scientific LLMs [78.18336140706471]
Sci-LLMは、生物発見を加速するための有望なフロンティアとして登場した。
現在の戦略では生の生体分子配列を処理する際にSci-LLMの推論能力を制限する。
より効果的な戦略は、Sci-LLMに高レベルな構造化コンテキストを提供することである。
論文 参考訳(メタデータ) (2025-10-27T09:03:21Z) - GenoMAS: A Multi-Agent Framework for Scientific Discovery via Code-Driven Gene Expression Analysis [12.311957227670598]
GenoMASは、タイプされたメッセージパッシングプロトコルを通じて6つの特殊エージェントを編成する。
GenoMASの中心には、ガイド付き計画フレームワークがある。
GenoMASは生物学的に証明可能な遺伝子フェノタイプ関連をその文献で裏付ける。
論文 参考訳(メタデータ) (2025-07-28T17:55:08Z) - GENERator: A Long-Context Generative Genomic Foundation Model [66.46537421135996]
本稿では,98k塩基対 (bp) と1.2Bパラメータからなるゲノム基盤モデル GENERator を提案する。
DNAの386Bbpからなる拡張データセットに基づいて、GENERatorは、確立されたベンチマークと新しく提案されたベンチマークの両方で最先端のパフォーマンスを実証する。
また、特に特定のアクティビティプロファイルを持つエンハンサーシーケンスを即応的に生成することで、シーケンス最適化において大きな可能性を秘めている。
論文 参考訳(メタデータ) (2025-02-11T05:39:49Z) - A Misclassification Network-Based Method for Comparative Genomic Analysis [3.7671415694914927]
メタデータに基づくゲノム配列の分類は、数十年間、比較ゲノム学において活発な研究領域であった。
本研究では、AIとネットワークサイエンスのアプローチを統合し、比較ゲノム分析フレームワークを開発する。
論文 参考訳(メタデータ) (2024-12-09T23:22:15Z) - GenBench: A Benchmarking Suite for Systematic Evaluation of Genomic Foundation Models [56.63218531256961]
我々はGenomic Foundation Modelsの有効性を評価するためのベンチマークスイートであるGenBenchを紹介する。
GenBenchはモジュラーで拡張可能なフレームワークを提供し、様々な最先端の方法論をカプセル化している。
本稿では,タスク固有性能におけるモデルアーキテクチャとデータセット特性の相互作用のニュアンス解析を行う。
論文 参考訳(メタデータ) (2024-06-01T08:01:05Z) - VQDNA: Unleashing the Power of Vector Quantization for Multi-Species Genomic Sequence Modeling [60.91599380893732]
VQDNAは、ゲノムボキャブラリ学習の観点からゲノムのトークン化を改良する汎用フレームワークである。
ベクトル量子化されたコードブックを学習可能な語彙として活用することにより、VQDNAはゲノムをパターン認識の埋め込みに適応的にトークン化することができる。
論文 参考訳(メタデータ) (2024-05-13T20:15:03Z) - Efficient and Scalable Fine-Tune of Language Models for Genome
Understanding [49.606093223945734]
textscLanguage prefix ftextscIne-tuning for textscGentextscOmes。
DNA基盤モデルとは異なり、textscLingoは自然言語基盤モデルの文脈的手がかりを戦略的に活用している。
textscLingoはさらに、適応的なランクサンプリング方法により、下流の細調整タスクを数多く許容する。
論文 参考訳(メタデータ) (2024-02-12T21:40:45Z) - GeneMask: Fast Pretraining of Gene Sequences to Enable Few-Shot Learning [18.24044777484094]
本稿では,遺伝子配列のトレーニングのための新しいマスキングアルゴリズムであるGeneMaskを提案する。
我々は、GeneMaskをベースとしたモデルが、4つのベンチマーク遺伝子配列分類データセット上でSOTAモデル(DNABertとLOGO)を大幅に上回っていることを観察した。
また,トップランクのPMIトークンと保存DNAシークエンスモチーフとの強い相関関係も観察した。
論文 参考訳(メタデータ) (2023-07-29T09:17:16Z) - Multi-modal Self-supervised Pre-training for Regulatory Genome Across
Cell Types [75.65676405302105]
我々は、GeneBERTと呼ばれる、多モードかつ自己管理的な方法でゲノムデータを事前学習するための、単純かつ効果的なアプローチを提案する。
我々はATAC-seqデータセットで1700万のゲノム配列でモデルを事前訓練する。
論文 参考訳(メタデータ) (2021-10-11T12:48:44Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。