論文の概要: Gram-MMD: A Texture-Aware Metric for Image Realism Assessment
- arxiv url: http://arxiv.org/abs/2604.03064v1
- Date: Fri, 03 Apr 2026 14:38:00 GMT
- ステータス: 翻訳完了
- システム内更新日: 2026-04-06 17:20:24.494575
- Title: Gram-MMD: A Texture-Aware Metric for Image Realism Assessment
- Title(参考訳): Gram-MMD:画像リアリズム評価のためのテクスチャ対応メトリック
- Abstract要約: GMMD(Gram-MMD)は、生成した画像のリアリズムを評価するためのリアリズム指標である。
我々は,KADID-10kデータベースとRAISEリアルタイムアセスメントデータセットについて実験を行った。
この結果から,GMMDは既存の意味レベルの指標と相補的な情報を取得することが示唆された。
- 参考スコア(独自算出の注目度): 0.0
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Evaluating the realism of generated images remains a fundamental challenge in generative modeling. Existing distributional metrics such as the Frechet Inception Distance (FID) and CLIP-MMD (CMMD) compare feature distributions at a semantic level but may overlook fine-grained textural information that can be relevant for distinguishing real from generated images. We introduce Gram-MMD (GMMD), a realism metric that leverages Gram matrices computed from intermediate activations of pretrained backbone networks to capture correlations between feature maps. By extracting the upper-triangular part of these symmetric Gram matrices and measuring the Maximum Mean Discrepancy (MMD) between an anchor distribution of real images and an evaluation distribution, GMMD produces a representation that encodes textural and structural characteristics at a finer granularity than global embeddings. To select the hyperparameters of the metric, we employ a meta-metric protocol based on controlled degradations applied to MS-COCO images, measuring monotonicity via Spearman's rank correlation and Kendall's tau. We conduct experiments on both the KADID-10k database and the RAISE realness assessment dataset using various backbone architectures, including DINOv2, DC-AE, Stable Diffusion's VAE encoder, VGG19, and the AlexNet backbone from LPIPS, among others. We also demonstrate on a cross-domain driving scenario (KITTI / Virtual KITTI / Stanford Cars) that CMMD can incorrectly rank real images as less realistic than synthetic ones due to its semantic bias, while GMMD preserves the correct ordering. Our results suggest that GMMD captures complementary information to existing semantic-level metrics.
- Abstract(参考訳): 生成した画像のリアリズムを評価することは、生成モデリングにおける根本的な課題である。
既存のFrechet Inception Distance (FID) やCLIP-MMD (CMMD) のような分布指標は、意味レベルで特徴分布を比較するが、生成した画像と実像を区別するのに関係のある微細なテクスチャ情報を見落としてしまう可能性がある。
本稿では,事前学習したバックボーンネットワークの中間活性化から計算したグラム行列を利用して特徴写像間の相関関係を捉えるリアリズム指標であるGram-MMD(GMMD)を紹介する。
実画像のアンカー分布と評価分布との間の最大平均不一致(MMD)を測定することにより、GMMDは、大域埋め込みよりも微細な粒度でテクスチャ特性と構造特性を符号化する表現を生成する。
パラメータのハイパーパラメータを選択するために,MS-COCO画像に対する制御劣化に基づくメタメトリックプロトコルを用い,Spearmanのランク相関とKendallのタウによるモノトニック性の測定を行った。
我々は, DINOv2, DC-AE, Staable DiffusionのVAEエンコーダ, VGG19, LPIPSのAlexNetバックボーンなど,様々なバックボーンアーキテクチャを用いて, KADID-10kデータベースとRAAISEリアルタイムアセスメントデータセットを実験する。
また、CMMDはその意味的バイアスのため、実画像が合成画像よりも現実的でないと誤ってランク付けでき、GMMDは正しい順序を保っているというクロスドメイン駆動シナリオ(KITTI/Virtual KITTI/Stanford Cars)を実証する。
この結果から,GMMDは既存の意味レベルの指標と相補的な情報を取得することが示唆された。
関連論文リスト
- A Calibrated Memorization Index (MI) for Detecting Training Data Leakage in Generative MRI Models [35.17637818310643]
画像生成モデルは、その出力の一部としてトレーニングデータからの複製画像が知られている。
そこで本研究では,トレーニングデータの暗記と重複を検出するために,サンプル単位の校正基準を提案する。
論文 参考訳(メタデータ) (2026-02-13T16:21:23Z) - MRAD: Zero-Shot Anomaly Detection with Memory-Driven Retrieval [16.654541753670348]
MRAD(Memory-Retrieval Anomaly Detection)は、パラメトリックフィッティングを直接メモリ検索に置き換える統合フレームワークである。
16の産業用および医療用データセットに対して、MRADフレームワークは、常に優れたパフォーマンスを示している。
論文 参考訳(メタデータ) (2026-01-31T05:30:57Z) - LDM-Morph: Latent diffusion model guided deformable image registration [2.8195553455247317]
医用画像登録のための非教師あり変形可能な登録アルゴリズム LDM-Morph を提案する。
潜在拡散モデル(LDM)から抽出したLDM-Morph統合機能を用いて意味情報を強化する。
4つのパブリックな2次元心臓画像データセットに対する大規模な実験により、提案されたLDM-Morphフレームワークは、既存の最先端CNNとTransformersベースの登録方法よりも優れていた。
論文 参考訳(メタデータ) (2024-11-23T03:04:36Z) - MRI Parameter Mapping via Gaussian Mixture VAE: Breaking the Assumption of Independent Pixels [3.720246718519987]
我々はMRIにおける定量的パラメータマッピングの新しいパラダイムを導入し、実証する。
独立画素の仮定を破る自己教師型深部変分法を提案する。
そこで本手法は,dMRIやqMRIなどのパラメータマッピング手法の臨床応用を支援することができる。
論文 参考訳(メタデータ) (2024-11-16T11:11:36Z) - OSMLoc: Single Image-Based Visual Localization in OpenStreetMap with Fused Geometric and Semantic Guidance [20.043977909592115]
OSMLocは、OpenStreetMapマップに対するファーストパーソナライズされたイメージに基づく、脳にインスパイアされた視覚的ローカライゼーションアプローチである。
意味的および幾何学的ガイダンスを統合し、精度、堅牢性、一般化能力を大幅に改善する。
論文 参考訳(メタデータ) (2024-11-13T14:59:00Z) - UniDepth: Universal Monocular Metric Depth Estimation [81.80512457953903]
ドメインをまたいだ単一の画像からメートル法3Dシーンを再構成できる新しいモデルUniDepthを提案する。
我々のモデルは擬似球面出力表現を利用しており、カメラと奥行きの表現を歪めている。
ゼロショット方式における10のデータセットの詳細な評価は、一貫してUniDepthの優れた性能を示している。
論文 参考訳(メタデータ) (2024-03-27T18:06:31Z) - ASCNet: Asymmetric Sampling Correction Network for Infrared Image Destriping [25.816984064145906]
非対称サンプリング補正ネットワーク(ASCNet)と呼ばれる新しい赤外画像デストリップ手法を提案する。
我々のASCNetは、Residual Haar Discrete Wavelet Transform (RHDWT), Pixel Shuffle (PS), Column Non-uniformity Correction Module (CNCM)の3つのコア要素で構成されています。
論文 参考訳(メタデータ) (2024-01-28T06:23:55Z) - Images in Discrete Choice Modeling: Addressing Data Isomorphism in
Multi-Modality Inputs [77.54052164713394]
本稿では,離散選択モデリング(DCM)と機械学習の交わりについて考察する。
本稿では,DCMフレームワーク内の従来の表型入力と同型情報を共有する高次元画像データの埋め込み結果について検討する。
論文 参考訳(メタデータ) (2023-12-22T14:33:54Z) - On quantifying and improving realism of images generated with diffusion [50.37578424163951]
与えられた画像の5つの統計的測度から算出した画像リアリズムスコア(IRS)と呼ばれるメトリクスを提案する。
IRSは、与えられた画像を実または偽のものとして分類する手段として容易に利用できる。
我々は,安定拡散モデル (SDM) , Dalle2, Midjourney, BigGAN による偽画像の検出に成功して,提案したIRSのモデルおよびデータに依存しない性質を実験的に確立した。
このデータセットは、高品質の4つのモデルによって生成される100のクラスに対して1,000のサンプルを提供します。
論文 参考訳(メタデータ) (2023-09-26T08:32:55Z) - Image Modeling with Deep Convolutional Gaussian Mixture Models [79.0660895390689]
画像の記述と生成に適したGMM(Deep Hierarchical Gaussian Mixture Models)の新しい定式化を紹介します。
DCGMMは、畳み込みとプーリング操作によってリンクされた複数のGMM層の積み重ねたアーキテクチャによってこれを回避している。
dcgmmsでシャープな画像を生成するために,畳み込みやプーリングなどの非可逆操作をサンプリングする新しい勾配に基づく手法を提案する。
MNISTとFashionMNISTのデータセットに基づいて,クラスタリング,サンプリング,外乱検出において,フラットなGMMよりも優れていることを示すことで,DCGMMsモデルを検証した。
論文 参考訳(メタデータ) (2021-04-19T12:08:53Z) - Adaptive Context-Aware Multi-Modal Network for Depth Completion [107.15344488719322]
我々は,観測された空間コンテキストを捉えるために,グラフ伝搬を採用することを提案する。
次に、注意機構を伝搬に適用し、ネットワークが文脈情報を適応的にモデル化することを奨励する。
最後に、抽出したマルチモーダル特徴を効果的に活用するための対称ゲート融合戦略を導入する。
本稿では,Adaptive Context-Aware Multi-Modal Network (ACMNet) を2つのベンチマークで評価した。
論文 参考訳(メタデータ) (2020-08-25T06:00:06Z) - Locally Masked Convolution for Autoregressive Models [107.4635841204146]
LMConvは標準的な2Dコンボリューションの簡単な修正であり、任意のマスクを画像の各位置の重みに適用することができる。
我々は,パラメータを共有するが生成順序が異なる分布推定器のアンサンブルを学習し,全画像密度推定の性能を向上させる。
論文 参考訳(メタデータ) (2020-06-22T17:59:07Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。