論文の概要: Content-Based Search for Deep Generative Models
- arxiv url: http://arxiv.org/abs/2210.03116v1
- Date: Thu, 6 Oct 2022 17:59:51 GMT
- ステータス: 処理完了
- システム内更新日: 2022-10-07 16:09:07.008468
- Title: Content-Based Search for Deep Generative Models
- Title(参考訳): 深層生成モデルのコンテンツベース検索
- Authors: Daohan Lu, Sheng-Yu Wang, Nupur Kumari, Rohan Agarwal, David Bau,
Jun-Yan Zhu
- Abstract要約: クエリと大量の生成モデルが与えられたら、クエリに最もよくマッチするモデルを見つけ出す。
本稿では,クエリが画像,スケッチ,テキスト記述,生成モデル,あるいは上記の組み合わせである場合に,この問題を抽出可能なものにするために近似を開発する。
検索では,画像編集と再構成,少数ショット転送学習,潜時空間に適したモデルが検索される。
- 参考スコア(独自算出の注目度): 26.022965069631876
- License: http://creativecommons.org/licenses/by/4.0/
- Abstract: The growing proliferation of pretrained generative models has made it
infeasible for a user to be fully cognizant of every model in existence. To
address this need, we introduce the task of content-based model search: given a
query and a large set of generative models, find the models that best match the
query. Because each generative model produces a distribution of images, we
formulate the search problem as an optimization to maximize the probability of
generating a query match given a model. We develop approximations to make this
problem tractable when the query is an image, a sketch, a text description,
another generative model, or a combination of the above. We benchmark our
method in both accuracy and speed over a set of generative models. We
demonstrate that our model search retrieves suitable models for image editing
and reconstruction, few-shot transfer learning, and latent space interpolation.
Finally, we deploy our search algorithm to our online generative model-sharing
platform at https://modelverse.cs.cmu.edu.
- Abstract(参考訳): 事前訓練された生成モデルの増加により、ユーザーが存在する全てのモデルを完全に認識することは不可能になった。
このニーズに対処するために、クエリと大量の生成モデルが与えられたら、クエリに最も合うモデルを見つけ出すという、コンテンツベースのモデルサーチのタスクを紹介します。
各生成モデルは画像の分布を生成するため、与えられたモデルに対してクエリマッチを生成する確率を最大化する最適化として探索問題を定式化する。
本稿では,クエリが画像,スケッチ,テキスト記述,生成モデル,あるいは上記の組み合わせである場合に,この問題を抽出できるように近似を開発する。
生成モデルのセットよりも精度と速度の両面で本手法をベンチマークする。
本モデル検索は,画像編集と再構成,少数ショット転送学習,潜在空間補間に適したモデルを検索できることを実証する。
最後に、検索アルゴリズムをオンライン生成モデル共有プラットフォームhttps://modelverse.cs.cmu.eduにデプロイします。
関連論文リスト
- Embedding-based statistical inference on generative models [10.948308354932639]
生成モデルの埋め込みに基づく表現に関する結果を、古典的な統計的推論設定に拡張する。
類似」の概念の基盤として視点空間を用いることは、複数のモデルレベルの推論タスクに有効であることを示す。
論文 参考訳(メタデータ) (2024-10-01T22:28:39Z) - Consistent estimation of generative model representations in the data
kernel perspective space [13.099029073152257]
大規模言語モデルやテキストから画像への拡散モデルのような生成モデルは、クエリを提示すると関連する情報を生成する。
同じクエリを表示すると、異なるモデルが異なる情報を生成する可能性がある。
本稿では,一組のクエリのコンテキストにおける生成モデルの埋め込みに基づく表現に関する新しい理論的結果を示す。
論文 参考訳(メタデータ) (2024-09-25T19:35:58Z) - Query-oriented Data Augmentation for Session Search [71.84678750612754]
本稿では,検索ログの強化とモデリングの強化を目的としたクエリ指向データ拡張を提案する。
検索コンテキストの最も重要な部分を変更することで補足的なトレーニングペアを生成する。
我々は、現在のクエリを変更するためのいくつかの戦略を開発し、その結果、様々な難易度で新しいトレーニングデータを得る。
論文 参考訳(メタデータ) (2024-07-04T08:08:33Z) - FusionBench: A Comprehensive Benchmark of Deep Model Fusion [78.80920533793595]
ディープモデル融合(Deep Model fusion)とは、複数のディープニューラルネットワークの予測やパラメータを単一のモデルに統合する手法である。
FusionBenchは、ディープモデル融合に特化した最初の包括的なベンチマークである。
論文 参考訳(メタデータ) (2024-06-05T13:54:28Z) - PAMI: partition input and aggregate outputs for model interpretation [69.42924964776766]
本研究では、深層学習モデルが局所的な特徴を集約してモデル予測を行うという観察に基づいて、PAMIと呼ばれるシンプルで効果的な可視化フレームワークを提案する。
基本的な考え方は、入力の大多数を隠蔽し、元のモデル予測に対する保存された入力部の相対的な寄与として対応するモデル出力を使用することである。
複数のタスクに対する大規模な実験により,提案手法は,クラス固有の入力領域をより正確に見つけるために,既存の可視化手法よりも優れていることを確認した。
論文 参考訳(メタデータ) (2023-02-07T08:48:34Z) - Model ensemble instead of prompt fusion: a sample-specific knowledge
transfer method for few-shot prompt tuning [85.55727213502402]
我々は、ソースタスクのソフトプロンプトから知識を伝達することで、プロンプトチューニングにおける数ショットのパフォーマンスを改善することに集中する。
我々はソースモデル(SESoM)のサンプル固有アンサンブルを提案する。
SESoMは、ソースモデルが出力されるときに、ターゲットの各サンプルに対するソースモデルのコントリビューションを個別に調整することを学ぶ。
論文 参考訳(メタデータ) (2022-10-23T01:33:16Z) - An Ample Approach to Data and Modeling [1.0152838128195467]
さまざまな分野の概念とメソッドを統合するモデルの構築方法をモデル化するためのフレームワークについて説明する。
参照M*メタモデルフレームワークは、厳密な同値関係の観点からデータセットと各モデルの関連付けに批判的に依存する。
開発されたフレームワークがデータクラスタリング、複雑性、共同研究、ディープラーニング、クリエイティビティに関する洞察を提供する方法について、いくつかの考察がなされている。
論文 参考訳(メタデータ) (2021-10-05T01:26:09Z) - Model-agnostic multi-objective approach for the evolutionary discovery
of mathematical models [55.41644538483948]
現代のデータ科学では、どの部分がより良い結果を得るために置き換えられるかというモデルの性質を理解することがより興味深い。
合成データ駆動型モデル学習において,多目的進化最適化を用いてアルゴリズムの所望特性を求める。
論文 参考訳(メタデータ) (2021-07-07T11:17:09Z) - Conditional Generative Models for Counterfactual Explanations [0.0]
本稿では,分散的非分布的モデル記述を生成する汎用フレームワークを提案する。
このフレームワークは、使用される生成モデルの種類や基礎となる予測モデルのタスクに関して柔軟である。
論文 参考訳(メタデータ) (2021-01-25T14:31:13Z) - ZSCRGAN: A GAN-based Expectation Maximization Model for Zero-Shot
Retrieval of Images from Textual Descriptions [13.15755441853131]
画像検索のためのゼロショットテキストのための新しいGANモデルを提案する。
提案モデルは期待最大化フレームワークを用いて訓練される。
複数のベンチマークデータセットの実験により,提案したモデルは,画像検索モデルに対して,最先端のゼロショットテキストよりも快適に優れていることが示された。
論文 参考訳(メタデータ) (2020-07-23T18:50:03Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。