[논문 리뷰] ALT: um software para análise de legibilidade de textos em Língua Portuguesa

Gleice Carvalho de Lima Moreno, Marco P. M. de Souza외 2명|arXiv (Cornell University)|2022. 03. 23.

Education and Digital Technologies인용 수 7

한 줄 요약

이 논문은 허버마스의 의사소통 행동 이론을 기반으로 하고 있으며, 브라질 포르투갈어에서의 난이도 평가를 위한 웹 기반 소프트웨어 도구 ALT를 제시한다. 이 도구는 문장 길이, 단어 빈도, syllable 수 등의 언어적 특징을 사용하여 텍스트의 명확성을 평가하며, 복잡한 텍스트를 간단히 함으로써 더 넓은 청중에게 도달하고 신뢰성을 높이는 실용적인 해결책을 제공한다.

ABSTRACT

In the initial stage of human life, communication, seen as a process of social interaction, was always the best way to reach consensus between the parties. Understanding and credibility in this process are essential for the mutual agreement to be validated. But, how to do it so that this communication reaches the great mass? This is the main challenge when what is sought is the dissemination of information and its approval. In this context, this study presents the ALT software, developed from original readability metrics adapted to the Portuguese language, available on the web, to reduce communication difficulties. The development of the software was motivated by the theory of communicative action of Habermas, which uses a multidisciplinary style to measure the credibility of the discourse in the communication channels used to build and maintain a safe and healthy relationship with the public. -- No estágio inicial da vida humana a comunicação, vista como um processo de interação social, foi sempre o melhor caminho para o consenso entre as partes. O entendimento e a credibilidade nesse processo são fundamentais para que o acordo mútuo seja validado. Mas, como fazê-lo de forma que essa comunicação alcance a grande massa? Esse é o principal desafio quando o que se busca é a difusão da informação e a sua aprovação. Nesse contexto, este estudo apresenta o software ALT, desenvolvido a partir de métricas de legibilidade originais adaptadas para a Língua Portuguesa, disponível na web, para reduzir as dificuldades na comunicação. O desenvolvimento do software foi motivado pela teoria do agir comunicativo de Habermas, que faz uso de um estilo multidisciplinar para medir a credibilidade do discurso nos canais de comunicação utilizados para construir e manter uma relação segura e saudável com o público.

연구 동기 및 목표

• 복잡하거나 명확하지 않거나 과도하게 전문적인 텍스트로 인해 발생하는 소통 장벽을 줄임으로써 포르투갈어에서의 정보 유통을 효과적으로 해결하기 위해.
• 포르투갈어에 맞게 조정된 난이도 평가 지표를 적용하여 텍스트의 접근성과 신뢰성을 향상시키기 위해.
• 전문가가 아닌 청중을 포함한 다양한 청중이 이해할 수 있도록 하는 텍스트를 작성하는 데 저자, 교육자, 소통 전문가를 지원하기 위해.
• 명확성, 진정성, 합리적 논의의 원칙을 실용적인 소프트웨어 도구에 통합함으로써 허버마스의 의사소통 행동 이론을 실천적으로 구현하기 위해.
• 실시간 난이도 평가를 가능하게 하는 무료로 이용 가능한 웹 기반 플랫폼을 제공하여 윤리적이고 효과적인 소통을 촉진하기 위해.

제안 방법

• 문장 평균 길이와 단어당 음절 수 등의 언어적 특징을 사용하여, 기존의 난이도 평가 지표(예: Flesch Reading Ease, Flesch-Kincaid Grade Level)를 포르투갈어 전용 공식으로 적응시킨다.
• 사용자가 텍스트를 입력하면 여러 지표에 따라 즉각적인 난이도 점수를 제공하는 웹 기반 인터페이스를 구현한다.
• 도구의 설계 및 평가 기준을 이끌어내는 개념적 프레임워크로, 허버마스의 네 가지 타당성 주장(이해 가능성, 진정성, 규범적 정당성, 진리성)을 통합한다.
• 단어 빈도, 음절 분할, 문장 복잡성 등을 포함한 텍스트 구조 분석을 위해 자연어 처리(NLP) 기법을 사용한다.
• 학술, 언론, 기술, 문학 등 다양한 텍스트 유형 간 일관성을 확보하기 위해 통계적 정규화를 적용한다.
• C# 및 .NET 기술을 사용하여 개발하고, 공개 웹 플랫폼에 호스팅하여 접근성과 확장성을 확보한다.

실험 결과

연구 질문

• RQ1 영어 및 기타 언어에서의 난이도 평가 지표는 어떻게 브라질 포르투갈어에 효과적으로 적응시켜 텍스트 이해도를 향상시킬 수 있는가?
• RQ2 허버마스의 의사소통 행동 이론을 적용할 경우, 포르투갈어 문체의 신뢰성과 명확성이 어느 정도 향상되는가?
• RQ3 적응된 난이도 공식을 사용하는 웹 기반 도구는 비전문가 청중을 위한 문체의 접근성을 뚜렷이 향상시킬 수 있는가?
• RQ4 문장 길이, 어휘 난이도 등의 언어적 복잡성과 포르투갈어 텍스트에서의 인식된 난이도 간의 관계는 어떠한가?
• RQ5 학술, 언론, 기술 유형 등의 다양한 텍스트 장르는 ALT 도구로 평가했을 때 난이도 점수에서 어떻게 비교되는가?

주요 결과

• ALT 소프트웨어는 다양한 텍스트 유형에서 포르투갈어 전용 지표를 사용하여 난이도 점수를 성공적으로 계산하였으며, Flesch Reading Ease 척도에서 10.1에서 21.2의 범위를 보였다.
• 학술 및 기술 텍스트(예: 물리학, 교육, 법률 분야의 학술 논문)는 난이도 점수가 낮게 나타났다(예: Flesch Reading Ease에서 13.5–17.2), 이는 복잡성이 높음을 시사한다.
• 문학 및 언론 텍스트(예: 톨킨의 『로로르의 왕자』, 코카콜라의 지속 가능성 보고서)는 중간에서 높은 난이도 점수(13.9–18.3)를 보이며, 더 나은 접근성을 나타냈다.
• 도구는 문장 길이가 길고 단어당 음절 수가 많은 텍스트가 난이도 척도에서 일관되게 낮은 점수를 받는다는 점을 확인했으며, 이는 언어적 특징이 난이도 예측에 강력한 영향을 미친다는 것을 확인했다.
• 허버마스의 타당성 주장 적용은 난이도 결과의 해석 가능성을 높이며, 언어적 명확성과 소통의 신뢰성 간의 연결 고리를 제공했다.
• 웹 기반 플랫폼은 실시간 피드백을 가능하게 하여 저자가 텍스트를 반복적으로 수정함으로써 명확성을 높이고 청중 범위를 넓힐 수 있도록 했다.