論文の概要: Semantic Communications with Computer Vision Sensing for Edge Video Transmission
- arxiv url: http://arxiv.org/abs/2503.07252v1
- Date: Mon, 10 Mar 2025 12:34:22 GMT
- ステータス: 翻訳完了
- システム内更新日: 2025-03-11 15:45:19.303964
- Title: Semantic Communications with Computer Vision Sensing for Edge Video Transmission
- Title(参考訳): エッジビデオ伝送のためのコンピュータビジョンセンシングを用いた意味コミュニケーション
- Authors: Yubo Peng, Luping Xiang, Kun Yang, Kezhi Wang, Merouane Debbah,
- Abstract要約: 意味コミュニケーション(SC)は、意味レベルで情報を抽出し、圧縮することで解決する。
従来のSC方式は、エッジビデオにおける静的フレームの繰り返し伝送により非効率に直面する。
エッジビデオ伝送のためのコンピュータビジョンセンシングフレームワークを用いたSCを提案する。
- 参考スコア(独自算出の注目度): 16.56792633171318
- License:
- Abstract: Despite the widespread adoption of vision sensors in edge applications, such as surveillance, the transmission of video data consumes substantial spectrum resources. Semantic communication (SC) offers a solution by extracting and compressing information at the semantic level, preserving the accuracy and relevance of transmitted data while significantly reducing the volume of transmitted information. However, traditional SC methods face inefficiencies due to the repeated transmission of static frames in edge videos, exacerbated by the absence of sensing capabilities, which results in spectrum inefficiency. To address this challenge, we propose a SC with computer vision sensing (SCCVS) framework for edge video transmission. The framework first introduces a compression ratio (CR) adaptive SC (CRSC) model, capable of adjusting CR based on whether the frames are static or dynamic, effectively conserving spectrum resources. Additionally, we implement an object detection and semantic segmentation models-enabled sensing (OSMS) scheme, which intelligently senses the changes in the scene and assesses the significance of each frame through in-context analysis. Hence, The OSMS scheme provides CR prompts to the CRSC model based on real-time sensing results. Moreover, both CRSC and OSMS are designed as lightweight models, ensuring compatibility with resource-constrained sensors commonly used in practical edge applications. Experimental simulations validate the effectiveness of the proposed SCCVS framework, demonstrating its ability to enhance transmission efficiency without sacrificing critical semantic information.
- Abstract(参考訳): 監視などのエッジアプリケーションに視覚センサーが広く採用されているにもかかわらず、ビデオデータの送信はかなりのスペクトル資源を消費する。
意味コミュニケーション(SC)は、意味レベルで情報を抽出して圧縮し、送信されたデータの正確性と関連性を保ちながら、送信された情報の量を大幅に減らし、解を提供する。
しかし、従来のSC手法では、エッジビデオにおける静的フレームの繰り返し伝送により、知覚能力の欠如により悪化し、スペクトル不効率が生じるため、非効率に直面する。
この課題に対処するために,エッジビデオ伝送のためのコンピュータビジョンセンシング(SCCVS)フレームワークを用いたSCを提案する。
このフレームワークはまず、フレームが静的か動的かに基づいてCRを調整することができる圧縮比(CR)適応SC(CRSC)モデルを導入する。
さらに,オブジェクト検出・セマンティックセグメンテーションモデル対応センシング(OSMS)方式を実装し,シーンの変化をインテリジェントに検知し,コンテキスト内分析により各フレームの意義を評価する。
したがって、OSMSスキームはリアルタイムセンシング結果に基づいてCRSCモデルにCRプロンプトを提供する。
さらに、CRSCとOSMSはどちらも軽量モデルとして設計されており、実用的なエッジアプリケーションで一般的に使用されるリソース制約センサーとの互換性を確保する。
提案したSCCVSフレームワークの有効性を実験的に検証し,重要な意味情報を犠牲にすることなく伝達効率を向上させる能力を示す。
関連論文リスト
- Efficient Semantic Communication Through Transformer-Aided Compression [31.285983939625098]
セマンティックコミュニケーションのためのチャネル対応適応フレームワークを提案する。
視覚変換器を用いて、パッチの意味的内容の尺度として注意マスクを解釈する。
本手法は,エンコード解像度をコンテンツ関連性に適応させることで通信効率を向上させる。
論文 参考訳(メタデータ) (2024-12-02T18:57:28Z) - Cross-Layer Encrypted Semantic Communication Framework for Panoramic Video Transmission [11.438045765196332]
パノラマビデオ伝送のための層間暗号化セマンティック通信(CLESC)フレームワークを提案する。
セマンティック情報の重要性に基づいて,CRC,チャネル符号化,再送方式を動的に調整する適応型クロス層伝送機構を提案する。
従来のクロス層伝送方式と比較して、CLESCフレームワークは帯域幅を85%削減できる。
論文 参考訳(メタデータ) (2024-11-19T07:18:38Z) - Conformal Distributed Remote Inference in Sensor Networks Under Reliability and Communication Constraints [61.62410595953275]
通信制約付き分散共形リスク制御(CD-CRC)
CD-CRCは通信制約下でのセンサネットワークのための新しい意思決定フレームワークである。
論文 参考訳(メタデータ) (2024-09-12T10:12:43Z) - Trustworthy Image Semantic Communication with GenAI: Explainablity, Controllability, and Efficiency [59.15544887307901]
画像意味コミュニケーション(ISC)は,高効率な映像コンテンツ伝送を実現する可能性に注目されている。
既存のISCシステムは、解釈可能性、操作性、互換性の課題に直面している。
我々は、複数の下流推論タスクにGenerative Artificial Intelligence(GenAI)を利用する新しい信頼できるISCフレームワークを提案する。
論文 参考訳(メタデータ) (2024-08-07T14:32:36Z) - Object-Attribute-Relation Representation Based Video Semantic Communication [35.87160453583808]
我々は,低ビットレート符号化を実現するためのビデオのセマンティックフレームワークとして,OAR(Object-Atribute-Relation)を導入する。
我々は低ビットレート表現と生成ビデオ再構成の両方にOARシーケンスを利用する。
トラヒック監視ビデオデータセットに関する実験は,映像伝送性能の観点から,我々のアプローチの有効性を評価した。
論文 参考訳(メタデータ) (2024-06-15T02:19:31Z) - Visual Language Model based Cross-modal Semantic Communication Systems [42.321208020228894]
本稿では,視覚言語モデルに基づくクロスモーダル・セマンティックコミュニケーションシステムを提案する。
VLM−CSCは、3つの新規成分を含む。
実験により, CSCシステムの有効性, 適応性, 堅牢性を検証した。
論文 参考訳(メタデータ) (2024-05-06T08:59:16Z) - Spatiotemporal Attention-based Semantic Compression for Real-time Video
Recognition [117.98023585449808]
本稿では,各フレームにおけるフレームと画素の重要性を評価するために,時間的注意に基づくオートエンコーダ(STAE)アーキテクチャを提案する。
我々は3D-2D CNNを組み合わせた軽量デコーダを開発し、欠落した情報を再構成する。
実験の結果,VT_STAEはビデオデータセットH51を,5%の精度で104倍圧縮できることがわかった。
論文 参考訳(メタデータ) (2023-05-22T07:47:27Z) - Causal Semantic Communication for Digital Twins: A Generalizable
Imitation Learning Approach [74.25870052841226]
デジタルツイン(DT)は、物理世界の仮想表現と通信(例えば6G)、コンピュータ、人工知能(AI)技術を活用して、多くの接続されたインテリジェンスサービスを実現する。
無線システムは、厳密な通信制約下での情報意思決定を容易にするために意味コミュニケーション(SC)のパラダイムを利用することができる。
DTベースの無線システムでは,因果意味通信(CSC)と呼ばれる新しいフレームワークが提案されている。
論文 参考訳(メタデータ) (2023-04-25T00:15:00Z) - Semantic Communication Enabling Robust Edge Intelligence for
Time-Critical IoT Applications [87.05763097471487]
本稿では、時間クリティカルなIoTアプリケーションのためのセマンティック通信を用いて、堅牢なエッジインテリジェンスを設計することを目的とする。
本稿では,画像DCT係数が推定精度に与える影響を解析し,オフロードのためのチャネル非依存の有効性符号化を提案する。
論文 参考訳(メタデータ) (2022-11-24T20:13:17Z) - Robust Information Bottleneck for Task-Oriented Communication with
Digital Modulation [31.39386509261528]
タスク指向通信は、主に学習ベースのジョイントソースチャネル符号化(JSCC)を用いており、通信効率のよいエッジ推論システムを設計することを目的としている。
チャネル変動に対する通信ロバスト性を改善するために,ロバスト情報ボトルネック (RIB) と呼ばれるロバスト符号化フレームワークを開発した。
提案するDT-JSCCは,通信遅延の低いベースライン方式よりも優れた推論性能を実現する。
論文 参考訳(メタデータ) (2022-09-21T14:21:14Z) - Model-based Deep Learning Receiver Design for Rate-Splitting Multiple
Access [65.21117658030235]
本研究では,モデルベース深層学習(MBDL)に基づく実用的なRSMA受信機の設計を提案する。
MBDL受信機は、符号なしシンボル誤り率(SER)、リンクレベルシミュレーション(LLS)によるスループット性能、平均トレーニングオーバーヘッドの観点から評価される。
その結果,MBDLはCSIRが不完全なSIC受信機よりも優れていた。
論文 参考訳(メタデータ) (2022-05-02T12:23:55Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。