[論文レビュー] A new communication paradigm: from bit accuracy to semantic fidelity

Guangming Shi, Dahua Gao+6 more|arXiv (Cornell University)|Jan 29, 2021

Wireless Signal Modulation Classification参考文献 11被引用数 47

ひとこと要約

本論文は、セマンティック・フィデリティに基づく通信フレームワーク（CTSf）を提案し、正確なビットレベルのメッセージではなくセマンティック・シンボルを伝送することで、意味的整合性を維持しつつ大幅な帯域幅節約を実現します。セマンティック変換、セマンティックレベル確認、セマンティック逆処理を導入し、音声伝送をケーススタディとします。

ABSTRACT

Wireless communication has achieved great success in the past several decades. The challenge is of improving bandwidth with limited spectrum and power consumption, which however has gradually become a bottleneck with evolution going on. The intrinsic problem is that communication is modeled as a message transportation from sender to receiver and pursues for an exact message replication in Shannon's information theory, which certainly leads to large bandwidth and power requirements with data explosion. However, the goal for communication among intelligent agents, entities with intelligence including humans, is to understand the meaning or semantics underlying data, not an accurate recovery of the transmitted messages. The separate first transmission and then understanding is a waste on bandwidth. In this article, we deploy semantics to solve the spectrum and power bottleneck and propose a first understanding and then transmission framework with high semantic fidelity. We first give a brief introduction of semantics covering the definition and properties to show the insights and scope of this paper. Then the proposed communication towards semantic fidelity framework is introduced, which takes the above mentioned properties into account to further improve efficiency. Specially, a semantic transformation is introduced to transform the input into semantic symbols. Different from the conventional transformations in signal processing area, for example discrete cosine transform, the transformation is with data loss, which is also the reason that the proposed framework can achieve large bandwidth saving with high semantic fidelity. Besides, we also discuss semantic noise and performance measurement. To evaluate the effectiveness, a case study of audio transmission is carried out. Finally, we discuss the typical applications and open challenges.

研究の動機と目的

• 無線通信におけるビットレベル・フィデリティからセマンティック・フィデリティへの移行を促す。
• 通信の文脈で意味を定義し、セマンティック伝送フレームワーク（CTSF）を確立する。
• 信号をセマンティック・シンボルへ変換するセマンティック変換と、セマンティックライブラリを介した抽象化機構を提案する。
• 送信者／受信者の知識を reconcile し理解可能性を保証するセマンティック・レベル確認を導入する。
• 音声伝送をケーススタディとして示し、帯域幅の節約とセマンティック・フィデリティの利点を示す。

提案手法

• データ集合を多対一の変換へマッピングすることで、データ損失を許容しつつ高いセマンティック・フィデリティを実現する意味を定義する。
• セマンティック表現（SR）とセマンティック・シンボル抽象化（SSA）からなるセマンティック変換パイプラインを導入し、セマンティクスを階層的セマンティックライブラリ（SL）で整理する。
• 送信者／受信者SLの差異に適応するため、適切な抽象レベルを選択するフィードバックを用いたセマンティック・レベル確認を提案する。
• セマンティック・シンボル認識（SSR）とセマンティック・シンボル逆表現（SSIR）を含むセマンティック逆処理を記述し、信号を回復するかセマンティックに等価な内容を生成する。
• セマンティックノイズ源（変換、チャネル、SL不一致、曖昧さ）を議論し、忠実度指標としてセマンティック・シンボル誤り率を定義する。
• ASRベースのSRとZIPベースのエンコーディングを用いた意味をCTS系で、従来のCCSとビット・フィデリティを比較する音声伝送のケーススタディを提示する。

実験結果

リサーチクエスチョン

• RQ1 無線通信において、セマンティック・シンボルとセマンティック変換はどのように帯域幅を削減しつつセマンティック・フィデリティを維持できるのか？
• RQ2 セマンティックライブラリ、レベル確認など、セマンティック理解を送信側と受信側で整合させるために必要な機構は何か？
• RQ3 セマンティックノイズはどのようにモデル化・測定されるべきか、そしてセマンティック・フィデリティは従来の信号フィデリティとどう比較されるのか？
• RQ4 音声伝送のような実用的ケースで、セマンティック変換のデータ損失と達成されるセマンティック・フィデリティのトレードオフはどうなるのか？

主な発見

• CTSfはケーススタディ（音声伝送）において、従来のケースよりも必要な帯域幅を大幅に削減しつつ高いセマンティック・フィデリティを維持する。
• セマンティック・フィデリティは従来のビット誤り率ではなくセマンティック・シンボル精度で測定され、データレートを削減した状態で意味のある比較を可能にする。
• 階層的セマンティックライブラリを備えたセマンティック変換パイプライン（SRとSSA）は、効率的な抽象化とモダリティ横断再構成を可能にする。
• セマンティック・レベル確認とSSR/SSIRは、SLの不一致やチャネルノイズがあっても頑健な伝送を実現する。
• このアプローチは、WAV/AACのベースラインと比較して、意味的フィデリティを高く目指す場合における帯域幅の大幅な節約を示す（例として最大2オーダーのマグニチュード級の節約がある）。