論文の概要: Semantics Alignment via Split Learning for Resilient Multi-User Semantic
Communication
- arxiv url: http://arxiv.org/abs/2310.09394v1
- Date: Fri, 13 Oct 2023 20:29:55 GMT
- ステータス: 処理完了
- システム内更新日: 2023-10-17 20:44:20.237508
- Title: Semantics Alignment via Split Learning for Resilient Multi-User Semantic
Communication
- Title(参考訳): レジリエントなマルチユーザセマンティックコミュニケーションのための分割学習によるセマンティックアライメント
- Authors: Jinhyuk Choi, Jihong Park, Seung-Woo Ko, Jinho Choi, Mehdi Bennis,
Seong-Lyun Kim
- Abstract要約: 最近の意味コミュニケーションの研究は、ディープジョイントソースやチャネルコーディング(DeepJSCC)のようなニューラルネットワーク(NN)ベースのトランシーバに依存している。
従来のトランシーバとは異なり、これらのニューラルトランシーバは実際のソースデータとチャネルを使用してトレーニング可能であり、セマンティクスを抽出し通信することができる。
本稿では,分割学習(SL)と部分的NN微調整技術を活用する分散学習ベースソリューションを提案する。
- 参考スコア(独自算出の注目度): 56.54422521327698
- License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
- Abstract: Recent studies on semantic communication commonly rely on neural network (NN)
based transceivers such as deep joint source and channel coding (DeepJSCC).
Unlike traditional transceivers, these neural transceivers are trainable using
actual source data and channels, enabling them to extract and communicate
semantics. On the flip side, each neural transceiver is inherently biased
towards specific source data and channels, making different transceivers
difficult to understand intended semantics, particularly upon their initial
encounter. To align semantics over multiple neural transceivers, we propose a
distributed learning based solution, which leverages split learning (SL) and
partial NN fine-tuning techniques. In this method, referred to as SL with layer
freezing (SLF), each encoder downloads a misaligned decoder, and locally
fine-tunes a fraction of these encoder-decoder NN layers. By adjusting this
fraction, SLF controls computing and communication costs. Simulation results
confirm the effectiveness of SLF in aligning semantics under different source
data and channel dissimilarities, in terms of classification accuracy,
reconstruction errors, and recovery time for comprehending intended semantics
from misalignment.
- Abstract(参考訳): 近年のセマンティックコミュニケーションの研究は、ディープジョイントソースやチャネルコーディング(DeepJSCC)のようなニューラルネットワーク(NN)ベースのトランシーバに依存している。
従来のトランシーバーとは異なり、これらのニューラルトランスシーバーは実際のソースデータとチャネルを使って訓練でき、意味論を抽出し、伝達することができる。
反対に、各神経トランシーバは本質的に特定のソースデータとチャネルに対して偏りがあり、意図した意味論を理解するのが困難である。
複数のニューラルトランシーバにセマンティクスを整合させるため,スプリットラーニング(SL)と部分NN微調整技術を活用した分散学習ベースソリューションを提案する。
この方法では、層凍結(SLF)付きSLと呼ばれ、各エンコーダは不整合デコーダをダウンロードし、これらのエンコーダ-デコーダNN層の一部を局所的に微調整する。
この割合を調整することで、SLFは計算と通信コストを制御する。
シミュレーションの結果,異なるソースデータとチャネルの相違に対する意味の整合におけるslfの有効性を,分類精度,再構成誤差,回復時間の観点から確認した。
関連論文リスト
- Alternate Learning based Sparse Semantic Communications for Visual
Transmission [13.319988526342527]
セマンティック通信(Semantic Communication, SemCom)は、従来のビットレベルの正確な伝送よりも優れていることを示す。
本稿では,SparseSBC という視覚伝達のための代替学習システム SemCom を提案する。
論文 参考訳(メタデータ) (2023-07-31T03:34:16Z) - Transformer-based Joint Source Channel Coding for Textual Semantic
Communication [23.431590618978948]
Space-Air-Ground-Sea統合ネットワークコールにより、ジャミングに対するより堅牢でセキュアな送信技術が要求される。
本稿では,文のモデル化とエンコードに先進的な自然言語処理技術を利用する,ロバスト伝送のためのテキスト意味伝達フレームワークを提案する。
論文 参考訳(メタデータ) (2023-07-23T08:42:05Z) - Neural networks trained with SGD learn distributions of increasing
complexity [78.30235086565388]
勾配降下法を用いてトレーニングされたニューラルネットワークは、まず低次入力統計を用いて入力を分類する。
その後、トレーニング中にのみ高次の統計を利用する。
本稿では,DSBと他の単純度バイアスとの関係について論じ,学習における普遍性の原理にその意味を考察する。
論文 参考訳(メタデータ) (2022-11-21T15:27:22Z) - Spiking Neural Network Decision Feedback Equalization [70.3497683558609]
決定フィードバック等化器(DFE)に似たフィードバック構造を持つSNNベースの等化器を提案する。
提案手法は,3種類の模範チャネルに対して,従来の線形等化器よりも明らかに優れていることを示す。
決定フィードバック構造を持つSNNは、競合エネルギー効率の良いトランシーバへのパスを可能にする。
論文 参考訳(メタデータ) (2022-11-09T09:19:15Z) - Bayesian Neural Network Language Modeling for Speech Recognition [59.681758762712754]
長期記憶リカレントニューラルネットワーク(LSTM-RNN)とトランスフォーマーで表される最先端のニューラルネットワーク言語モデル(NNLM)は非常に複雑になりつつある。
本稿では,LSTM-RNN と Transformer LM の基盤となる不確実性を考慮するために,ベイズ学習フレームワークの全体構造を提案する。
論文 参考訳(メタデータ) (2022-08-28T17:50:19Z) - Learning Based Joint Coding-Modulation for Digital Semantic
Communication Systems [45.81474044790071]
学習に基づくセマンティックコミュニケーションでは、ニューラルネットワークは従来の通信システムで異なるビルディングブロックを置き換える。
ニューラルネットワークに基づくデジタル変調の本質的なメカニズムは、ニューラルネットワークエンコーダの連続的な出力を離散的なコンステレーションシンボルにマッピングすることである。
我々は,BPSK変調を用いたディジタルセマンティック通信のための共同符号化変調方式を開発した。
論文 参考訳(メタデータ) (2022-08-11T08:58:35Z) - Deep Learning-Enabled Semantic Communication Systems with Task-Unaware
Transmitter and Dynamic Data [43.308832291174106]
本稿では,画像伝送のためのニューラルネットワークを用いたセマンティックコミュニケーションシステムを提案する。
提案手法は,データ回復とタスク実行の両面で高い性能を維持しつつ,観測可能なデータセットに適応することができる。
論文 参考訳(メタデータ) (2022-04-30T13:45:50Z) - Volumetric Transformer Networks [88.85542905676712]
学習可能なモジュールである容積変換器ネットワーク(VTN)を導入する。
VTNは、中間CNNの空間的およびチャネル的特徴を再設定するために、チャネル回りの歪み場を予測する。
実験の結果,VTNは特徴量の表現力を一貫して向上し,細粒度画像認識とインスタンスレベルの画像検索におけるネットワークの精度が向上することがわかった。
論文 参考訳(メタデータ) (2020-07-18T14:00:12Z) - Progressive Tandem Learning for Pattern Recognition with Deep Spiking
Neural Networks [80.15411508088522]
スパイキングニューラルネットワーク(SNN)は、低レイテンシと高い計算効率のために、従来の人工知能ニューラルネットワーク(ANN)よりも優位性を示している。
高速かつ効率的なパターン認識のための新しいANN-to-SNN変換およびレイヤワイズ学習フレームワークを提案する。
論文 参考訳(メタデータ) (2020-07-02T15:38:44Z) - Infomax Neural Joint Source-Channel Coding via Adversarial Bit Flip [41.28049430114734]
本稿では、ニューラルジョイント・ソース・チャネル符号化方式の安定性と堅牢性を改善するために、Infomax Adversarial-Bit-Flip (IABF) と呼ばれる新しい正規化手法を提案する。
我々のIABFは、圧縮と誤り訂正のベンチマークの両方で最先端のパフォーマンスを達成でき、ベースラインをかなりの差で上回ることができる。
論文 参考訳(メタデータ) (2020-04-03T10:00:02Z)
関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。
指定された論文の情報です。
本サイトの運営者は本サイト(すべての情報・翻訳含む)の品質を保証せず、本サイト(すべての情報・翻訳含む)を使用して発生したあらゆる結果について一切の責任を負いません。