論文の概要: Rethinking Communication Metrics: How Should We Measure Meaning?

• arxiv url: http://arxiv.org/abs/2608.21626v1
• Date: Fri, 21 Aug 2026 20:49:21 GMT
• ステータス: 翻訳完了
• システム内更新日: 2026-08-25 13:29:43.332279
• Title: Rethinking Communication Metrics: How Should We Measure Meaning?
• Title（参考訳）: コミュニケーションメトリクスを再考する: 意味を測定するには?
• Abstract要約: モダリティ、タスク、チャネル条件にまたがるセマンティックな品質を特徴づける指標はひとつもない。 本稿では,テキストと画像に基づくセマンティックコミュニケーションシステムのためのキーパフォーマンスインジケータ(KPI)について,統一的・評価中心の観点から検討する。
• 参考スコア（独自算出の注目度）: 1.0450509067356148
• License: http://arxiv.org/licenses/nonexclusive-distrib/1.0/
• Abstract: Semantic communication shifts the objective of communication systems from accurate symbol reconstruction toward meaning preservation, task accomplishment, and efficient information exchange. However, its evaluation remains fragmented across telecommunications, natural language processing, computer vision, and machine learning, and no single metric can characterize semantic quality across modalities, tasks, and channel conditions. This article surveys key performance indicators (KPIs) for text- and image-based semantic communication systems from a unified, evaluation-centered perspective. Unlike prior surveys primarily organized around architectures, applications, or transmission strategies, this work focuses on how semantic success should be defined and measured. Existing KPIs are classified according to communication goal, source modality, receiver output, reference availability, evaluation level, and channel or resource constraints. The survey reviews reconstruction-based, task-oriented, reference-free, representation-level, perceptual, and channel-aware metrics, and presents a cross-modality comparison of their roles, strengths, and limitations. It further analyzes how unresolved semantic-KPI challenges affect monitoring, quality assurance, resource optimization, fault diagnosis, and standardization. Key open problems include the absence of universal semantic success criteria and standardized semantic ground truth, semantic drift, limited reference-free evaluation, weak integration of machine-learning metrics with communication constraints, and the lack of relation-level and multimodal KPIs. Finally, future research directions are outlined toward standardized, interpretable, adaptive, task-aware, and communication-aware evaluation frameworks.
• Abstract（参考訳）: 意味的コミュニケーションは、コミュニケーションシステムの目的を、正確なシンボル再構成から意味保存、タスク達成、効率的な情報交換へとシフトさせる。 しかし、その評価は通信、自然言語処理、コンピュータビジョン、機械学習にまたがって断片化されており、単一のメートル法では、モダリティ、タスク、チャネル条件のセマンティックな品質を特徴づけることができない。 本稿では,テキストと画像に基づくセマンティックコミュニケーションシステムのためのキーパフォーマンスインジケータ(KPI)について,統一的・評価中心の観点から検討する。 アーキテクチャ、アプリケーション、送信戦略を中心に主に組織された以前の調査とは異なり、この研究はセマンティックな成功をどのように定義し、測定するかに焦点を当てている。 既存のKPIは、通信目標、ソースモダリティ、レシーバ出力、参照可用性、評価レベル、チャネルまたはリソース制約に基づいて分類される。 調査では、再構成に基づく、タスク指向、参照なし、表現レベル、知覚的、チャンネル対応のメトリクスをレビューし、それらの役割、強み、限界を横断的に比較した。 さらに、未解決のセマンティックKPI課題が監視、品質保証、リソース最適化、障害診断、標準化にどのように影響するかを分析する。 主要なオープンな問題は、普遍的セマンティック成功基準の欠如と標準化されたセマンティックグラウンドの真理、セマンティックドリフト、限られた参照自由評価、コミュニケーション制約を伴う機械学習メトリクスの弱い統合、関係レベルとマルチモーダルKPIの欠如である。 最後に, 標準化, 解釈, 適応, タスク認識, コミュニケーション認識評価フレームワークについて, 今後の研究方針について概説する。

関連論文リスト

• Bridging the Usability Gap: Lessons from Interpreting Studies for Machine Interpreting Design [0.0]
  機械解釈(英: Machine Interpreting、MI)は、音声翻訳のリアルタイムな応用である。 しかし、ユーザエクスペリエンスはインタープリタ経由の通信よりもはるかに劣っている。 本稿では、MIを音声翻訳の異なるサブフィールドとして定義する。
  論文  参考訳（メタデータ） (2026-06-14T20:41:59Z)
• Interactive ASR: Towards Human-Like Interaction and Semantic Coherence Evaluation for Agentic Speech Recognition [52.63676763985825]
  トークンレベルの精度を超えた認識品質を評価するための意味認識評価指標を提案する。 我々は,人間のようなマルチターンインタラクションをシミュレートするエージェント・フレームワークを設計し,認識出力の反復的改善を可能にする。 対話型およびエージェント型ASRにおける今後の研究を促進するためのコードをリリースする。
  論文  参考訳（メタデータ） (2026-04-10T09:02:42Z)
• The Silence that Speaks: Neural Estimation via Communication Gaps [1.7332551623907755]
  CALMは、コミュニケーションスケジューリングと推定器設計の2つの課題を共同で解決する、新しい学習ベースのフレームワークである。 本研究では,CALMが推定器とスケジューラ間の暗黙的な調整を復号化して「サイレンス」の事例から情報を抽出し,推定精度を向上させることを示す。
  論文  参考訳（メタデータ） (2025-11-30T19:58:21Z)
• Pragmatic Goal-Oriented Communications under Semantic-Effectiveness Channel Errors [3.266331042379877]
  近日中のAI支援6Gネットワークでは、セマンティック、プラグマティック、ゴール指向のコミュニケーション戦略の統合が必須となる。 本稿では,意味的および有効性の両レベルでの言語ミスマッチから生じる誤りを数学的にモデル化する手法を提案する。 本稿では,言語ミスマッチを補うメカニズムが提案される可能性を示し,ノイズの多い通信環境下での信頼性通信の実現可能性を高める。
  論文  参考訳（メタデータ） (2024-01-19T16:43:47Z)
• Reasoning with the Theory of Mind for Pragmatic Semantic Communication [62.87895431431273]
  本稿では,実用的な意味コミュニケーションフレームワークを提案する。 2つの知性エージェント間の効果的な目標指向情報共有を可能にする。 数値的な評価は、少ないビット量で効率的な通信を実現するためのフレームワークの能力を示している。
  論文  参考訳（メタデータ） (2023-11-30T03:36:19Z)
• Cognitive Semantic Communication Systems Driven by Knowledge Graph: Principle, Implementation, and Performance Evaluation [74.38561925376996]
  単一ユーザと複数ユーザのコミュニケーションシナリオに対して,認知意味コミュニケーションフレームワークが2つ提案されている。 知識グラフから推論規則をマイニングすることにより,効果的な意味補正アルゴリズムを提案する。 マルチユーザ認知型セマンティックコミュニケーションシステムにおいて,異なるユーザのメッセージを識別するために,メッセージ復元アルゴリズムを提案する。
  論文  参考訳（メタデータ） (2023-03-15T12:01:43Z)
• Beyond Transmitting Bits: Context, Semantics, and Task-Oriented Communications [88.68461721069433]
  次世代システムは、メッセージセマンティクスを折り畳み、コミュニケーションの目標を設計に組み込むことによって、潜在的に豊かになる。 このチュートリアルは、初期適応、セマンティック・アウェア、タスク指向コミュニケーションから始まり、現在までの取り組みを要約する。 その焦点は、情報理論を利用して基礎を提供するアプローチと、意味論やタスク対応コミュニケーションにおける学習の重要な役割である。
  論文  参考訳（メタデータ） (2022-07-19T16:00:57Z)
• Common Language for Goal-Oriented Semantic Communications: A Curriculum Learning Framework [66.81698651016444]
  目標指向タスク実行を実現するための包括的セマンティックコミュニケーションフレームワークを提案する。 カリキュラム学習(CL)と強化学習(RL)を組み合わせた新しいトップダウンフレームワークを提案する。 シミュレーションの結果,提案手法は,学習中の収束時間,タスク実行時間,送信コストにおいて従来のRLよりも優れていた。
  論文  参考訳（メタデータ） (2021-11-15T19:13:55Z)
• GO FIGURE: A Meta Evaluation of Factuality in Summarization [131.1087461486504]
  本稿では,現実性評価指標を評価するメタ評価フレームワークGO FIGUREを紹介する。 10個の実測値のベンチマーク分析により、我々のフレームワークが堅牢で効率的な評価を提供することが明らかとなった。 また、QAメトリクスは、ドメイン間の事実性を測定する標準的なメトリクスよりも一般的に改善されているが、パフォーマンスは、質問を生成する方法に大きく依存していることも明らかにしている。
  論文  参考訳（メタデータ） (2020-10-24T08:30:20Z)

関連論文リストは本サイト内にある論文のタイトル・アブストラクトから自動的に作成しています。

指定された論文の情報です。
本サイトの運営者は本サイト（すべての情報・翻訳含む）の品質を保証せず、本サイト（すべての情報・翻訳含む）を使用して発生したあらゆる結果について一切の責任を負いません。