[논문 리뷰] Semantics-Native Communication with Contextual Reasoning

Hyowoon Seo, Jihong Park외 2명|arXiv (Cornell University)|2021. 08. 12.

Wireless Signal Modulation Classification참고 문헌 50인용 수 38

한 줄 요약

논문은 System 1과 System 2 의미-자연스러운 커뮤니케이션(SNC)을 도입하며 맥락 추론을 통해 SR 비길이를 줄이고 신뢰성을 향상시키고 수렴 보장 및 실증 검증을 제공한다.

ABSTRACT

Spurred by a huge interest in the post-Shannon communication, it has recently been shown that leveraging semantics can significantly improve the communication effectiveness across many tasks. In this article, inspired by human communication, we propose a novel stochastic model of System 1 semantics-native communication (SNC) for generic tasks, where a speaker has an intention of referring to an entity, extracts the semantics, and communicates its symbolic representation to a target listener. To further reach its full potential, we additionally infuse contextual reasoning into SNC such that the speaker locally and iteratively self-communicates with a virtual agent built on the physical listener's unique way of coding its semantics, i.e., communication context. The resultant System 2 SNC allows the speaker to extract the most effective semantics for its listener. Leveraging the proposed stochastic model, we show that the reliability of System 2 SNC increases with the number of meaningful concepts, and derive the expected semantic representation (SR) bit length which quantifies the extracted effective semantics. It is also shown that System 2 SNC significantly reduces the SR length without compromising communication reliability.

연구 동기 및 목표

• 점-대-점 의미-자연스러운 커뮤니케이션(SNC)의 확률적 모델 개발.
• 화자와 청자 사이에 맥락 추론을 삽입하여 System 2 SNC 도입.
• System 2 SNC 하에서 상호 커뮤니케이션 맥락으로의 수렴 증명.
• 맥락 추론이 SR 비길이와 신뢰성에 미치는 영향 분석.
• 이론적 결과를 시뮬레이션 및 강건성 평가로 검증.

제안 방법

• 작용-개념-기호(A→C→S) 파이프라인을 정의하고, 작용-개념 관련성 X_c, A2C, C2S, S2C 매핑을 포함.
• System 1 SNC의 의미 표현(SR) 비길이의 기대값 도출(정리 1).
• System 2 SNC를 목표- 균형 S, L, M via (8)로 설정한 자기-SNC 최적화로 형식화.
• 교대 최소화 알고리즘(정리 2–3)을 개발하여 수렴하는 상호 맥락 M*를 달성.
• 의미 있는 개념의 수가 증가함에 따라 신뢰성이 어떻게 향상되는지 정량화(정리 3)하고 System 2 SNC 하에서 SR 비길이를 도출(보론 3).
• SR 매핑에 대한 불완전한 에이전트 상태 및 양자화 전략에 대한 강건성 논의.

실험 결과

연구 질문

• RQ1 맥락 추론이 의미-자연스러운 커뮤니케이션에서 SR 비길이와 신뢰성에 어떤 영향을 미치는가?
• RQ2 System 2 SNC가 화자와 청자 간의 공통 상호 맥 context로의 수렴으로 이어질 수 있는가?
• RQ3 이질적인 에이전트 상태가 맥락 추론의 성능과 수렴에 어떤 영향을 미치는가?
• RQ4 rA2C와 rC2A의 매개변수 선택(alpha, beta)의 트레이드오프는 System 2 SNC에서 어떤가?

주요 결과

• System 1 SNC는 정리 1에 따라 개념 관련성 확률에 의존하는 SR 비길이에 대한 닫힌 형태의 경계치를 제공한다.
• System 2 SNC는 자기-SNC 맥락 추론을 통해 에이전트 간의 상호 맥락으로 수렴한다(정리 2).
• System 2 SNC는 의미 있는 개념 수가 증가함에 따라 신뢰성을 높인다(정리 3).
• 교대 최소화 절차가 맥락 추론 과정의 수렴을 달성한다(정리 2).
• 보론은 System 2 SNC 하에서 SR 비길이 특성을 확립한다.
• System 2 SNC는 개념이 추론 전에 양자화될 때 불완전한 에이전트 상태에 대해 강건성을 보인다.