論文の概要: Hyperrealistic Image Inpainting with Hypergraphs
- arxiv url: http://arxiv.org/abs/2011.02904v1
- Date: Thu, 5 Nov 2020 15:28:57 GMT
- ステータス: 処理完了
- システム内更新日: 2022-09-29 12:17:05.916360
- Title: Hyperrealistic Image Inpainting with Hypergraphs
- Title(参考訳): ハイパーグラフによる超現実的イメージインペインティング
- Authors: Gourav Wadhwa, Abhinav Dhall, Subrahmanyam Murala, Usman Tariq
- Abstract要約: 空間的特徴にハイパーグラフの畳み込みを導入し,データ間の複雑な関係を学習する。
また、予測画像の局所的な一貫性を強制するために、識別器にゲート畳み込みを導入する。
Places2、CelebA-HQ、Paris Street View、Facadesのデータセットに対する実験は、我々のアプローチが最先端の結果を達成することを示している。
- 参考スコア(独自算出の注目度): 21.43182752819447
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Image inpainting is a non-trivial task in computer vision due to multiple
possibilities for filling the missing data, which may be dependent on the
global information of the image. Most of the existing approaches use the
attention mechanism to learn the global context of the image. This attention
mechanism produces semantically plausible but blurry results because of
incapability to capture the global context. In this paper, we introduce
hypergraph convolution on spatial features to learn the complex relationship
among the data. We introduce a trainable mechanism to connect nodes using
hyperedges for hypergraph convolution. To the best of our knowledge, hypergraph
convolution have never been used on spatial features for any image-to-image
tasks in computer vision. Further, we introduce gated convolution in the
discriminator to enforce local consistency in the predicted image. The
experiments on Places2, CelebA-HQ, Paris Street View, and Facades datasets,
show that our approach achieves state-of-the-art results.
- Abstract(参考訳): 画像インペインティングは、画像のグローバル情報に依存する可能性のある、欠落したデータを埋める複数の可能性のために、コンピュータビジョンにおいて非自明なタスクである。
既存のアプローチのほとんどは、アテンションメカニズムを使用して、イメージのグローバルコンテキストを学ぶ。
この注意のメカニズムは、グローバルコンテキストを捉えることができないため、意味的に妥当だがぼやけた結果を生み出す。
本稿では,空間的特徴に関するハイパーグラフ畳み込みを導入し,データ間の複雑な関係を学習する。
ハイパーエッジを用いたハイパーグラフ畳み込みのためのノード接続機構を提案する。
私たちの知る限りでは、ハイパーグラフ畳み込みはコンピュータビジョンにおける画像から画像へのタスクの空間的特徴に一度も使われていない。
さらに,識別器にゲート畳み込みを導入し,予測画像の局所的一貫性を強制する。
Places2、CelebA-HQ、Paris Street View、Facadesのデータセットに対する実験は、我々のアプローチが最先端の結果を達成することを示している。
関連論文リスト
- Contrasting Deepfakes Diffusion via Contrastive Learning and Global-Local Similarities [88.398085358514]
Contrastive Deepfake Embeddings (CoDE)は、ディープフェイク検出に特化した新しい埋め込み空間である。
CoDEは、グローバルローカルな類似性をさらに強化することで、対照的な学習を通じて訓練される。
論文 参考訳(メタデータ) (2024-07-29T18:00:10Z) - Hypergraph Transformer for Semi-Supervised Classification [50.92027313775934]
我々は新しいハイパーグラフ学習フレームワークHyperGraph Transformer(HyperGT)を提案する。
HyperGTはTransformerベースのニューラルネットワークアーキテクチャを使用して、すべてのノードとハイパーエッジのグローバル相関を効果的に検討する。
局所接続パターンを保ちながら、グローバルな相互作用を効果的に組み込むことで、包括的なハイパーグラフ表現学習を実現する。
論文 参考訳(メタデータ) (2023-12-18T17:50:52Z) - All the World's a (Hyper)Graph: A Data Drama [55.144729234861316]
Hyperbardはシェイクスピアの戯曲からの多様なデータ表現のデータセットである。
私たちの表現は、単一のシーンで文字の共起をキャプチャする単純なグラフから、複雑な通信設定を符号化するハイパーグラフまで様々です。
データソースへのオマージュとして、科学もまた芸術であると主張するため、私たちはすべてのポイントを遊びの形で提示します。
論文 参考訳(メタデータ) (2022-06-16T14:51:28Z) - Hypergraph Convolutional Networks via Equivalency between Hypergraphs
and Undirected Graphs [59.71134113268709]
本稿では,EDVWおよびEIVWハイパーグラフを処理可能な一般学習フレームワークであるGeneral Hypergraph Spectral Convolution(GHSC)を提案する。
本稿では,提案するフレームワークが最先端の性能を達成できることを示す。
ソーシャルネットワーク分析,視覚的客観的分類,タンパク質学習など,様々な分野の実験により,提案手法が最先端の性能を達成できることが実証された。
論文 参考訳(メタデータ) (2022-03-31T10:46:47Z) - Adaptive Neural Message Passing for Inductive Learning on Hypergraphs [21.606287447052757]
本稿では,新しいハイパーグラフ学習フレームワークHyperMSGを紹介する。
各ノードの次数集中度に関連する注意重みを学習することで、データとタスクに適応する。
堅牢で、幅広いタスクやデータセットで最先端のハイパーグラフ学習手法より優れています。
論文 参考訳(メタデータ) (2021-09-22T12:24:02Z) - A Deep Local and Global Scene-Graph Matching for Image-Text Retrieval [4.159666152160874]
シーングラフの提示は画像テキストマッチングの課題に適した方法である。
本稿では,最先端の手法を強化するローカル・グローバル・シーングラフマッチング(LGSGM)モデルを提案する。
Flickr30kデータセットのリコールを10%以上増やすことで,レベルの組み合わせによる改善により,ベースライン手法の性能を向上させることができる。
論文 参考訳(メタデータ) (2021-06-04T10:33:14Z) - Diverse Single Image Generation with Controllable Global Structure
though Self-Attention [1.2522889958051286]
我々は、生成的敵ネットワークを用いて、グローバルなコンテキストを必要とする画像を生成する方法を示す。
我々の結果は、特にグローバルなコンテキストを必要とする画像の生成において、最先端技術よりも視覚的に優れている。
ピクセルの平均標準偏差を用いて測定した画像生成の多様性も良好である。
論文 参考訳(メタデータ) (2021-02-09T11:52:48Z) - HyperSAGE: Generalizing Inductive Representation Learning on Hypergraphs [24.737560790401314]
2段階のニューラルメッセージパッシング戦略を用いて、ハイパーグラフを介して情報を正確かつ効率的に伝播する新しいハイパーグラフ学習フレームワークHyperSAGEを提案する。
本稿では,HyperSAGEが代表的ベンチマークデータセット上で最先端のハイパーグラフ学習手法より優れていることを示す。
論文 参考訳(メタデータ) (2020-10-09T13:28:06Z) - Sub-graph Contrast for Scalable Self-Supervised Graph Representation
Learning [21.0019144298605]
既存のグラフニューラルネットワークは、計算量やメモリコストが限られているため、完全なグラフデータで供給される。
textscSubg-Conは、中央ノードとそのサンプルサブグラフ間の強い相関を利用して、地域構造情報をキャプチャすることで提案される。
既存のグラフ表現学習アプローチと比較して、textscSubg-Conは、より弱い監視要件、モデル学習のスケーラビリティ、並列化において、顕著なパフォーマンス上のアドバンテージを持っています。
論文 参考訳(メタデータ) (2020-09-22T01:58:19Z) - Multi-Level Graph Convolutional Network with Automatic Graph Learning
for Hyperspectral Image Classification [63.56018768401328]
HSI分類のための自動グラフ学習法(MGCN-AGL)を用いたマルチレベルグラフ畳み込みネットワーク(GCN)を提案する。
空間的に隣接する領域における重要度を特徴付けるために注意機構を利用することで、最も関連性の高い情報を適応的に組み込んで意思決定を行うことができる。
MGCN-AGLは局所的に生成した表現表現に基づいて画像領域間の長距離依存性を符号化する。
論文 参考訳(メタデータ) (2020-09-19T09:26:20Z) - High-Order Information Matters: Learning Relation and Topology for
Occluded Person Re-Identification [84.43394420267794]
本稿では,高次関係とトポロジ情報を識別的特徴とロバストなアライメントのために学習し,新しい枠組みを提案する。
我々のフレームワークはOccluded-Dukeデータセットで最先端の6.5%mAPスコアを大幅に上回っている。
論文 参考訳(メタデータ) (2020-03-18T12:18:35Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。