[논문 리뷰] A new communication paradigm: from bit accuracy to semantic fidelity

Guangming Shi, Dahua Gao외 6명|arXiv (Cornell University)|2021. 01. 29.

Wireless Signal Modulation Classification참고 문헌 11인용 수 47

한 줄 요약

논문은 시맨틱 정확성 기반 커뮤니케이션 프레임워크 CTSf를 제안하여 시맨틱 심볼을 전송하고, 정확한 비트 수준 메시지 대신 대역폭 절약을 가능하게 하되 시맨틱 무결성을 유지합니다. 시맨틱 변환, 시맨틱 수준 확인, 시맨틱 역처리를 도입하고 오디오 전송에 대한 사례 연구를 제공합니다.

ABSTRACT

Wireless communication has achieved great success in the past several decades. The challenge is of improving bandwidth with limited spectrum and power consumption, which however has gradually become a bottleneck with evolution going on. The intrinsic problem is that communication is modeled as a message transportation from sender to receiver and pursues for an exact message replication in Shannon's information theory, which certainly leads to large bandwidth and power requirements with data explosion. However, the goal for communication among intelligent agents, entities with intelligence including humans, is to understand the meaning or semantics underlying data, not an accurate recovery of the transmitted messages. The separate first transmission and then understanding is a waste on bandwidth. In this article, we deploy semantics to solve the spectrum and power bottleneck and propose a first understanding and then transmission framework with high semantic fidelity. We first give a brief introduction of semantics covering the definition and properties to show the insights and scope of this paper. Then the proposed communication towards semantic fidelity framework is introduced, which takes the above mentioned properties into account to further improve efficiency. Specially, a semantic transformation is introduced to transform the input into semantic symbols. Different from the conventional transformations in signal processing area, for example discrete cosine transform, the transformation is with data loss, which is also the reason that the proposed framework can achieve large bandwidth saving with high semantic fidelity. Besides, we also discuss semantic noise and performance measurement. To evaluate the effectiveness, a case study of audio transmission is carried out. Finally, we discuss the typical applications and open challenges.

연구 동기 및 목표

• 무선 통신에서 비트 수준의 충실도에서 시맨틱 충실도로의 전환을 촉진한다.
• 통신 맥락에서 시맨틱을 정의하고 시맨틱 전송 프레임워크 (CTSF)를 확립한다.
• 신호를 시맨틱 심볼로 변환하는 시맨틱 변환과 시맨틱 라이브러리를 통한 추상화 메커니즘을 제안한다.
• 발신자/수신자 지식의 차이를 조정하고 이해 가능성을 보장하기 위한 시맨틱 수준 확인을 도입한다.
• 대역폭 절감과 시맨틱 충실성 이점을 보여주기 위해 오디오 전송에 대한 사례 연구로 이 접근법을 시연한다.

제안 방법

• 시맨틱 및 시맨틱 심볼을 데이터 부분집합으로 정의하고 다대일 전환을 통해 데이터 손실은 허용되나 높은 시맨틱 충실성을 가능하게 한다.
• 시맨틱 표현(SR)과 시맨틱 심볼 추상화(SSA)를 포함하는 시맨틱 변환 파이프라인을 도입하고 시맨틱을 계층적 시맨틱 라이브러리(SL)로 구성한다.
• 발신자/수신자의 SL 차이에 적응하기 위한 시맨틱 수준 확인을 제안하고 피드백을 사용해 적절한 추상화 수준을 선택한다.
• 시맨틱 역처리(Semantic inverse processing)를 SSR(semantic symbol recognition) 및 SSIR(semantic symbol inverse representation)을 포함하여 신호를 복원하거나 시맨틱 동등 콘텐츠를 생성하는 방법을 기술한다.
• 시맨틱 노이즈 소스(변환, 채널, SL 불일치, 애매모호성)를 논의하고 시맨틱 심볼 에러율을 충실도 지표로 정의한다.
• ASR 기반 SR 및 ZIP 기반 인코딩을 시맨틱에 사용하여 기존 CCS의 비트 충실도와 CTSF를 비교하는 오디오 전송에 대한 사례 연구를 제시한다.

실험 결과

연구 질문

• RQ1 시맨틱 심볼과 시맨틱 변환이 무선 통신에서 시맨틱 충실도를 유지하면서 대역폭을 어떻게 감소시킬 수 있는가?
• RQ2 발신자와 수신자가 시맨틱 이해를 일치시키려면 어떤 메커니즘(시맨틱 라이브러리, 수준 확인)이 필요한가?
• RQ3 시맨틱 노이즈를 어떻게 모형화하고 측정하며 시맨틱 충실도는 전통적인 신호 충실도와 어떻게 비교되는가?
• RQ4 오디오 전송과 같은 실제 사례에서 시맨틱 변환의 데이터 손실과 달성된 시맨틱 충실도 간의 트레이드오프는 무엇인가?

주요 결과

• CTSF는 사례 연구(오디오 전송)에서 필요한 대역폭을 대폭 줄이면서도 높은 시맨틱 충실도를 유지한다.
• 시맨틱 충실도는 전통적인 비트 오류율이 아니라 시맨틱 심볼 정확도로 측정되어 데이터 전송률 감소와 의미 있는 비교를 가능하게 한다.
• 계층적 시맨틱 라이브러리를 갖춘 시맨틱 변환 파이프라인(SR 및 SSA)은 효율적인 추상화와 교차 모달리티 재구성을 가능하게 한다.
• 시맨틱 수준 확인 및 SSR/SSIR은 SL 불일치 및 채널 노이즈가 있을 때에도 강력한 전송을 가능하게 한다.
• 이 접근법은 높은 시맨틱 충실도를 목표로 할 때 WAV/AAC 기준 대비 대역폭 절감이 크게 나타남을 보여준다(예: 예제에서 최대 두 자릿수 차이).