論文の概要: Activating Frequency and ViT for 3D Point Cloud Quality Assessment
without Reference
- arxiv url: http://arxiv.org/abs/2312.05972v1
- Date: Sun, 10 Dec 2023 19:13:34 GMT
- ステータス: 処理完了
- システム内更新日: 2023-12-12 17:37:59.025667
- Title: Activating Frequency and ViT for 3D Point Cloud Quality Assessment
without Reference
- Title(参考訳): 参照のない3次元クラウド品質評価のための周波数とVTTの活性化
- Authors: Oussama Messai, Abdelouahid Bentamou, Abbass Zein-Eddine, Yann Gavet
- Abstract要約: 与えられた3D-PCの非参照品質指標を提案する。
入力属性を品質スコアにマップするには、Deformable Convolutional Network(DCN)とViT(ViT)を組み合わせた軽量ハイブリッドディープモデルを用いる。
その結果,本手法は現在のNR-PCQA測度やPointXRのFR-PCQAよりも優れていた。
- 参考スコア(独自算出の注目度): 0.49157446832511503
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Deep learning-based quality assessments have significantly enhanced
perceptual multimedia quality assessment, however it is still in the early
stages for 3D visual data such as 3D point clouds (PCs). Due to the high volume
of 3D-PCs, such quantities are frequently compressed for transmission and
viewing, which may affect perceived quality. Therefore, we propose no-reference
quality metric of a given 3D-PC. Comparing to existing methods that mostly
focus on geometry or color aspects, we propose integrating frequency magnitudes
as indicator of spatial degradation patterns caused by the compression. To map
the input attributes to quality score, we use a light-weight hybrid deep model;
combined of Deformable Convolutional Network (DCN) and Vision Transformers
(ViT). Experiments are carried out on ICIP20 [1], PointXR [2] dataset, and a
new big dataset called BASICS [3]. The results show that our approach
outperforms state-of-the-art NR-PCQA measures and even some FR-PCQA on PointXR.
The implementation code can be found at: https://github.com/o-messai/3D-PCQA
- Abstract(参考訳): 深層学習に基づく品質評価は、知覚的マルチメディア品質評価を著しく向上させたが、3dポイントクラウド(pcs)のような3dビジュアルデータはまだ初期段階にある。
3D-PCの容量が大きいため、このような量は送信や視聴のために頻繁に圧縮され、品質に影響を及ぼす可能性がある。
そこで我々は,与えられた3D-PCの非参照品質指標を提案する。
幾何や色に着目した既存手法と比較して, 圧縮による空間劣化パターンの指標として, 周波数等級を統合することを提案する。
入力属性を品質スコアにマップするには、変形可能な畳み込みネットワーク(dcn)と視覚トランスフォーマー(vit)を組み合わせた軽量ハイブリッドディープモデルを用いる。
icip20 [1]、pointxr [2] dataset、basics [3]と呼ばれる新しいデータセットで実験が行われている。
その結果,本手法は現在のNR-PCQA測度やPointXRのFR-PCQAよりも優れていた。
実装コードはhttps://github.com/o-messai/3d-pcqa。
関連論文リスト
- No-Reference Point Cloud Quality Assessment via Graph Convolutional Network [89.12589881881082]
3次元(3D)ポイントクラウドは、新しいビジュアルメディアフォーマットとして、消費者にますます好まれている。
ポイントクラウドは、必然的に、マルチメディア通信システムによる品質劣化と情報損失に悩まされる。
マルチビュー2次元投影画像の相互依存関係を特徴付けるために,GCN(Graph Convolutional Network)を用いた新しい非参照PCQA手法を提案する。
論文 参考訳(メタデータ) (2024-11-12T11:39:05Z) - Simple Baselines for Projection-based Full-reference and No-reference
Point Cloud Quality Assessment [60.2709006613171]
投影型ポイントクラウド品質評価(PCQA)のための簡易ベースラインを提案する。
我々は、全参照(FR)タスクと非参照(NR)PCQAタスクの両方に対して、点雲から共通立方体状の投影プロセスによって得られる多重射影を用いる。
ICIP 2023 PCVQA Challengeに参加して,5トラック中4トラックで首位を獲得した。
論文 参考訳(メタデータ) (2023-10-26T04:42:57Z) - GQE-Net: A Graph-based Quality Enhancement Network for Point Cloud Color
Attribute [51.4803148196217]
本稿では,点雲の色歪みを低減するため,グラフベースの品質向上ネットワーク(GQE-Net)を提案する。
GQE-Netは、幾何学情報を補助入力とグラフ畳み込みブロックとして使用し、局所的な特徴を効率的に抽出する。
実験結果から,本手法は最先端性能を実現することが示された。
論文 参考訳(メタデータ) (2023-03-24T02:33:45Z) - MM-PCQA: Multi-Modal Learning for No-reference Point Cloud Quality
Assessment [32.495387943305204]
マルチモーダル方式で,新しい非参照点クラウド品質評価(NR-PCQA)指標を提案する。
具体的には、点雲を部分モデルに分割し、点シフトやダウンサンプリングのような局所的な幾何学的歪みを表す。
目標を達成するために、サブモデルと投影された画像は、ポイントベースおよびイメージベースニューラルネットワークで符号化される。
論文 参考訳(メタデータ) (2022-09-01T06:11:12Z) - Blind Quality Assessment of 3D Dense Point Clouds with Structure Guided
Resampling [71.68672977990403]
本研究では,3次元高密度点雲の知覚的視覚的品質を自動評価するために,Structure Guided Resampling (SGR) を用いた客観的点雲品質指標を提案する。
提案するSGRは,参照情報の不要な汎用ブラインド品質評価手法である。
論文 参考訳(メタデータ) (2022-08-31T02:42:55Z) - Evaluating Point Cloud from Moving Camera Videos: A No-Reference Metric [58.309735075960745]
本稿では,ビデオ品質評価(VQA)手法を用いて,ポイントクラウド品質評価(PCQA)タスクの処理方法について検討する。
捉えたビデオは、いくつかの円形の経路を通して、点雲の周りでカメラを回転させて生成する。
トレーニング可能な2D-CNNモデルと事前学習された3D-CNNモデルを用いて、選択したキーフレームとビデオクリップから空間的・時間的品質認識特徴を抽出する。
論文 参考訳(メタデータ) (2022-08-30T08:59:41Z) - Reduced Reference Perceptual Quality Model and Application to Rate
Control for 3D Point Cloud Compression [61.110938359555895]
レート歪み最適化では、ビットレートの制約を受ける再構成品質尺度を最大化してエンコーダ設定を決定する。
本稿では,V-PCC幾何および色量化パラメータを変数とする線形知覚品質モデルを提案する。
400個の圧縮された3D点雲による主観的品質試験の結果,提案モデルが平均評価値とよく相関していることが示唆された。
また、同じ目標ビットレートに対して、提案モデルに基づくレート歪みの最適化は、ポイント・ツー・ポイントの客観的な品質指標による徹底的な探索に基づくレート歪みの最適化よりも高い知覚品質を提供することを示した。
論文 参考訳(メタデータ) (2020-11-25T12:42:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。