[논문 리뷰] A Review of Language and Speech Features for Cognitive-Linguistic Assessment.

Rohit Voleti, Julie Liss외 1명|arXiv (Cornell University)|2019. 06. 04.

Neurobiology of Language and Bilingualism참고 문헌 33인용 수 1

한 줄 요약

이 논문은 언어 신호 처리와 자연어 처리를 통해 유도된 말하기 및 언어적 특징을 바탕으로 객관적인 인지-언어적 평가를 가능하게 한다. 이는 조기 인지 기능 저하 및 신경계 질환을 탐지하기 위해 언어 다양성, 문법 복잡성, 의미 일관성 및 시간적 특징을 측정하는 특징들을 평가하며, 분야의 발전을 위한 향후 연구 방향을 제안한다.

ABSTRACT

It is widely accepted that information derived from analyzing speech (the acoustic signal) and language production (words and sentences) serves as a useful window into the health of an individual's cognitive ability. In fact, most neuropsychological batteries used in cognitive assessment have a component related to speech and language where clinicians elicit speech from patients for subjective evaluation across a broad set of dimensions. With advances in speech signal processing and natural language processing, there has been recent interest in developing tools to detect more subtle changes in cognitive-linguistic function. This work relies on extracting a set of features from recorded and transcribed speech for objective assessments of cognition, early diagnosis of neurological disease, and objective tracking of disease after diagnosis. In this paper we provide a review of existing speech and language features used in this domain, discuss their clinical application, and highlight their advantages and disadvantages. Broadly speaking, the review is split into two categories: language features based on natural language processing and speech features based on speech signal processing. Within each category, we consider features that aim to measure complementary dimensions of cognitive-linguistics, including language diversity, syntactic complexity, semantic coherence, and timing. We conclude the review with a proposal of new research directions to further advance the field.

연구 동기 및 목표

• 인지-언어적 평가에 사용된 기존의 말하기 및 언어적 특징을 검토하기 위해.
• 이러한 특징들이 미세한 인지 기능 변화를 탐지하는 데 있어 임상적 유용성을 평가하기 위해.
• 말하기 신호 처리 및 자연어 처리 특징의 장단점을 비교하기 위해.
• 현재 방법론의 격차를 특정하고 새로운 연구 방향을 제안하기 위해.

제안 방법

• 인지 평가에서 말하기 및 언어적 특징에 관한 문헌에 대한 체계적 리뷰.
• 특징들을 두 영역으로 분류: 말하기 신호 처리 및 자연어 처리.
• 언어 다양성, 문법 복잡성, 의미 일관성 및 시간적 특징을 측정하는 특징 분석.
• 실행기능 및 기억과 같은 인지-언어적 차원과의 관련성 평가.
• 현재 접근 방식의 강점과 한계를 강조하기 위해 연구 결과 통합.
• 특징 개발 및 임상 통합 측면에서 발견된 격차를 바탕으로 향후 연구 방향 제안.

실험 결과

연구 질문

• RQ1 어떤 말하기 및 언어적 특징이 미세한 인지 기능 변화를 탐지하는 데 가장 효과적인가?
• RQ2 말하기 신호 처리 특징과 자연어 처리 특징은 인지-언어적 기능 평가에서 어떻게 비교되는가?
• RQ3 자동화된 특징을 사용하는 데 있어 임상적 장점과 한계는 무엇인가?
• RQ4 이러한 특징들은 신경계 질환의 조기 진단과 종기적 추적에 어떻게 기여할 수 있는가?
• RQ5 자동화된 인지-언어적 평가의 신뢰성과 타당성을 향상시키기 위해 어떤 새로운 연구 방향이 필요한가?

주요 결과

• 말하기 및 언어적 특징은 특히 인지 기능 저하의 조기 징후를 탐지하는 데 있어 신뢰할 수 있는 창을 제공한다.
• 언어 다양성, 문법 복잡성, 의미 일관성 및 시간적 특징은 자동 분석을 통해 측정 가능한 핵심 차원이다.
• 자연어 처리 특징, 예를 들어 어휘 다양성과 문법 복잡성은 실행기능 및 기억 성능과 강한 상관관계를 보인다.
• 말하기 신호 처리 특징, 예를 들어 프로소디 및 말하기 속도는 인지-언어적 건강에 대한 보완적인 통찰을 제공한다.
• 현재 도구들은 객관적이고 확장 가능한 인지 평가 가능성을 보여주지만, 임상 현장에서의 추가 검증이 필요하다.
• 다중모달 특징(말하기 및 언어)의 통합은 미세한 인지 기능 변화에 대한 감도를 향상시킨다.