[논문 리뷰] Intelligent Voice Prosthesis: Converting Icons into Natural Language Sentences

Pascal Vaillant, Michael Checler|ArXiv.org|1995. 06. 21.

Natural Language Processing Techniques참고 문헌 1인용 수 5

한 줄 요약

이 논문은 뇌성마비를 앓는 사람들과 같은 심한 언어 장애를 가진 환자를 위해, 비구조화된 아이콘 시퀀스를 자연어 문장으로 변환하는 지능형 음성 보조 장치를 제시한다. 이 시스템은 기호 기반의 의미 분석을 통해 의미를 추론하고, 어휘화된 의미 네트워크로 매핑한 후, 트리 부착 문법(TAG) 기반의 계층적 구조를 통해 문법적으로 올바른 문장을 생성함으로써 비언어적 사용자들이 자연스럽고 유창한 의사소통을 할 수 있도록 한다.

ABSTRACT

The Intelligent Voice Prosthesis is a communication tool which reconstructs the meaning of an ill-structured sequence of icons or symbols, and expresses this meaning into sentences of a Natural Language (French). It has been developed for the use of people who cannot express themselves orally in natural language, and further, who are not able to comply to grammatical rules such as those of natural language. We describe how available corpora of iconic communication by children with Cerebral Palsy has led us to implement a simple and relevant semantic description of the symbol lexicon. We then show how a unification-based, bottom-up semantic analysis allows the system to uncover the meaning of the user's utterances by computing proper dependencies between the symbols. The result of the analysis is then passed to a lexicalization module which chooses the right words of natural language to use, and builds a linguistic semantic network. This semantic network is then generated into French sentences via hierarchization into trees, using a lexicalized Tree Adjoining Grammar. Finally we describe the modular, customizable interface which has been developed for this system.

연구 동기 및 목표

• 자연어를 생성하거나 문법 규칙을 따를 수 없는 심한 언어 장애가 있는 환자를 위한 의사소통 보조 장치를 개발하는 것.
• 비구조화된 아이콘 시퀀스를 의미 있고 문법적으로 올바른 자연어 문장으로 변환하는 도전 과제를 해결하는 것.
• 실시간 의사소통을 지원하는 맞춤형이고 모듈러한 인터페이스를 만드는 것.
• 어린이들이 생성한 기호 의사소통 데이터 코퍼스를 활용하여 의미 기반의 기호 어휘를 구축하는 것.

제안 방법

• 뇌성마비를 앓는 어린이들이 생성한 기호 의사소통 데이터 코퍼스를 활용하여 기호 어휘의 단순하면서도 효과적인 의미 기반 기술을 정의한다.
• 통합 기반의 하향식 의미 분석을 통해 기호 간의 의존 관계를 계산하고 기호 시퀀스의 근본적인 의미를 추론한다.
• 의미 추론 결과를 어휘화 모듈을 통해 어휘화된 의미 네트워크로 이관하며, 적절한 자연어 어휘를 선택한다.
• 어휘화된 트리 부착 문법(TAG)을 적용하여 의미 네트워크를 문법적 트리로 계층화하여 문장 생성을 수행한다.
• 계층적 트리 구조를 자연어 출력으로 변환하여 자연스럽고 흐름 있는 프랑스어 문장을 생성한다.
• 임상 및 실제 생활 환경에서의 적응성과 사용성을 고려해 설계된 모듈러하고 맞춤형 인터페이스를 특징으로 한다.

실험 결과

연구 질문

• RQ1 비구조화된 아이콘 시퀀스는 어떻게 의미적으로 해석되어 비언어적 사용자가 의도한 의미를 복원할 수 있는가?
• RQ2 기호 입력에서 자연어 출력으로의 신뢰할 수 있는 매핑을 가능하게 하는 의미적 및 문법적 메커니즘은 무엇인가?
• RQ3 심한 언어 장애가 있는 환자를 위해 비언어적 기반의 아이콘 입력으로부터 자연스럽고 문법적으로 올바른 문장을 생성하는 방법은 무엇인가?
• RQ4 어린이들이 생성한 기호 의사소통 데이터 코퍼스는 사용 가능한 기호 어휘를 모델링하는 데 어떤 역할을 하는가?
• RQ5 모듈러하고 맞춤형 인터페이스는 보조 의사소통 기술 분야에서 다양한 사용자 요구를 어떻게 지원할 수 있는가?

주요 결과

• 시스템은 의미 분석과 문법 생성을 통해 비구조화된 아이콘 시퀀스를 일관되고 자연스러운 프랑스어 문장으로 성공적으로 변환한다.
• 통합 기반의 의미 분석은 기호 간의 의존 관계를 효과적으로 파악하여, 모호하거나 비표준적인 아이콘 시퀀스에서도 의미를 견고하게 복원할 수 있다.
• 어휘화된 트리 부착 문법(TAG) 접근법을 통해 의미 네트워크에서 문법적으로 정확하고 자연스러운 프랑스어 문장을 생성할 수 있었다.
• 뇌성마비를 앓는 어린이들이 실제 사용한 기초 아이콘 데이터 코퍼스를 활용함으로써 의미적으로 관련성 있고 실용적인 기호 어휘 설계가 가능했다.
• 모듈러 인터페이스 설계는 개인의 사용자 요구에 맞게 맞춤화되고 적응 가능하게 하여 임상 및 일상 생활 환경에서의 사용성을 향상시켰다.