論文の概要: Long-Text-to-Image Generation via Compositional Prompt Decomposition
- arxiv url: http://arxiv.org/abs/2604.18258v1
- Date: Mon, 20 Apr 2026 13:31:36 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-21 21:52:52.905055
- Title: Long-Text-to-Image Generation via Compositional Prompt Decomposition
- Title(参考訳): 合成プロンプト分解による長文画像生成
- Authors: Jen-Yuan Huang, Tong Lin, Yilun Du,
- Abstract要約: 本稿では,PRISM(Prompt Refraction for Intricate Scene Modeling)を提案する。
PRISMは軽量モジュールを使用して、長いプロンプトから構成表現を抽出する。
我々は、PRISMを幅広いモデルアーキテクチャで評価し、同じトレーニングデータに基づいて微調整されたモデルに匹敵する性能を示す。
- 参考スコア(独自算出の注目度): 47.96103954009652
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: While modern text-to-image (T2I) models excel at generating images from intricate prompts, they struggle to capture the key details when the inputs are descriptive paragraphs. This limitation stems from the prevalence of concise captions that shape their training distributions. Existing methods attempt to bridge this gap by either fine-tuning T2I models on long prompts, which generalizes poorly to longer lengths; or by projecting the oversize inputs into normal-prompt space and compromising fidelity. We propose Prompt Refraction for Intricate Scene Modeling (PRISM), a compositional approach that enables pre-trained T2I models to process long sequence inputs. PRISM uses a lightweight module to extract constituent representations from the long prompts. The T2I model makes independent noise predictions for each component, and their outputs are merged into a single denoising step using energy-based conjunction. We evaluate PRISM across a wide range of model architectures, showing comparable performances to models fine-tuned on the same training data. Furthermore, PRISM demonstrates superior generalization, outperforming baseline models by 7.4% on prompts over 500 tokens in a challenging public benchmark.
- Abstract(参考訳): 最新のテキスト・トゥ・イメージ(T2I)モデルは複雑なプロンプトから画像を生成するのに優れているが、入力が記述的な段落である場合、重要な詳細を捉えるのに苦労する。
この制限は、トレーニング分布を形成する簡潔なキャプションの頻度に起因している。
既存の手法では、長いプロンプト上で微調整されたT2Iモデルによってこのギャップを埋めようとするが、これは長小から長大に一般化する。
Intricate Scene Modeling (PRISM) のための Prompt Refraction を提案する。
PRISMは軽量モジュールを使用して、長いプロンプトから構成表現を抽出する。
T2Iモデルは各コンポーネントに対して独立したノイズ予測を行い、その出力をエネルギーベース結合を用いて1つの認知ステップにマージする。
我々は、PRISMを幅広いモデルアーキテクチャで評価し、同じトレーニングデータに基づいて微調整されたモデルに匹敵する性能を示す。
さらに、PRISMはより優れた一般化を示し、挑戦的な公開ベンチマークにおいて500以上のトークンのプロンプトでベースラインモデルを7.4%上回る。
関連論文リスト
- TIT-Score: Evaluating Long-Prompt Based Text-to-Image Alignment via Text-to-Image-to-Text Consistency [81.17906057429329]
LPG-Benchは、ロングプロンプトベースのテキスト・ツー・イメージ・ジェネレーションを評価するための包括的なベンチマークである。
13の最先端モデルから2,600の画像を生成し、包括的なヒューマンランクアノテーションを実行します。
本稿では,TITと呼ばれるテキスト・画像・画像間の整合性に基づくゼロショット計測手法を提案する。
論文 参考訳(メタデータ) (2025-10-03T13:25:16Z) - AcT2I: Evaluating and Improving Action Depiction in Text-to-Image Models [58.85362281293525]
本稿では、アクション中心のプロンプトから画像を生成する際のT2Iモデルの性能を評価するためのベンチマークであるAcT2Iを紹介する。
我々は、先行するT2IモデルがAcT2Iにうまく対応していないことを実験的に検証した。
我々は,この制限に対処するために,大規模言語モデルを用いた訓練不要の知識蒸留技術を開発した。
論文 参考訳(メタデータ) (2025-09-19T16:41:39Z) - PromptEnhancer: A Simple Approach to Enhance Text-to-Image Models via Chain-of-Thought Prompt Rewriting [31.35160142315478]
本稿では,テキスト・ツー・イメージ(T2I)モデルのための新規で普遍的なプロンプト書き換えフレームワークであるPromptEnhancerを紹介する。
モデル固有の微調整やイメージ・リワードスコアのような暗黙の報酬信号に依存する従来の手法とは異なり、我々のフレームワークはリライターをジェネレータから切り離す。
Hunyuan Image 2.1モデルの実験では、PromptEnhancerは幅広い意味的および構成的課題において画像テキストアライメントを大幅に改善することを示した。
論文 参考訳(メタデータ) (2025-09-04T16:46:10Z) - RePrompt: Reasoning-Augmented Reprompting for Text-to-Image Generation via Reinforcement Learning [88.14234949860105]
RePromptは、強化学習による迅速な強化プロセスに明示的な推論を導入する、新しいリプロンプトフレームワークである。
提案手法は,人手による注釈付きデータなしでエンドツーエンドのトレーニングを可能にする。
論文 参考訳(メタデータ) (2025-05-23T06:44:26Z) - Direct Consistency Optimization for Robust Customization of Text-to-Image Diffusion Models [67.68871360210208]
テキスト・ツー・イメージ(T2I)拡散モデルは、いくつかの個人画像に微調整された場合、高い一貫性で視覚を生成することができる。
本稿では,微調整モデルと事前学習モデルとの偏差を制御し,直接整合性最適化(Direct Consistency Optimization)と呼ばれる新たな微調整対象を提案する。
提案手法は, 通常の微調整モデルとのマージに最適化したモデルよりも, 高速な忠実度と主観的忠実度が得られることを示す。
論文 参考訳(メタデータ) (2024-02-19T09:52:41Z) - LLM-grounded Diffusion: Enhancing Prompt Understanding of Text-to-Image
Diffusion Models with Large Language Models [62.75006608940132]
本研究は,テキストから画像への拡散モデルにおいて,迅速な理解能力を高めることを提案する。
提案手法は,新たな2段階プロセスにおいて,事前訓練された大規模言語モデルを用いてグラウンドド生成を行う。
提案手法は,画像の正確な生成において,ベース拡散モデルといくつかの強いベースラインを著しく上回る。
論文 参考訳(メタデータ) (2023-05-23T03:59:06Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。