[논문 리뷰] Evaluation of an Intelligent Assistive Technology for Voice Navigation of Spreadsheets

Derek Flood, Kevin McDaid외 2명|ArXiv.org|2008. 09. 21.

Spreadsheets and End-User Computing참고 문헌 10인용 수 6

한 줄 요약

이 논문은 반복성 스트레스 장애(RSI)를 앓는 사용자가 음성 명령을 통해 스프레드시트를 효율적으로 탐색할 수 있도록 돕는 지능형 음성 탐색 시스템 iVoice를 제안한다. 주요 음성 인식 시스템과의 비교 평가에서, iVoice는 자연어 입력을 통해 일반적인 감사 작업을 자동화하여 탐색 시간과 오류를 크게 줄였으며, 장애를 가진 사용자에게 뛰어난 사용성과 효율성을 보여주었다.

ABSTRACT

An integral part of spreadsheet auditing is navigation. For sufferers of Repetitive Strain Injury who need to use voice recognition technology this navigation can be highly problematic. To counter this the authors have developed an intelligent voice navigation system, iVoice, which replicates common spreadsheet auditing behaviours through simple voice commands. This paper outlines the iVoice system and summarizes the results of a study to evaluate iVoice when compared to a leading voice recognition technology.

연구 동기 및 목표

• 반복성 스트레스 장애(RSI)를 앓는 사용자가 음성 인식 기술을 사용해 스프레드시트를 탐색하는 데 직면한 과제를 해결하기 위해.
• 간단한 음성 명령을 통해 일반적인 스프레드시트 감사 행동을 모방하는 지능형 음성 탐색 시스템을 개발하기 위해.
• 작업 완료 시간, 정확도, 사용자 효율성 측면에서 iVoice의 성능을 주요 상용 음성 인식 시스템과 비교 평가하기 위해.
• 실제 스프레드시트 감사 시나리오에서 iVoice의 사용성과 효과성을 평가하기 위해.

제안 방법

• iVoice 시스템은 자연어 음성 명령을 해석하여 셀 간 이동, 범위 선택, 감사 기능 실행과 같은 스프레드시트 탐색 작업을 수행한다.
• 사용자 발화를 특정 스프레드시트 작업으로 매핑하기 위해 규칙 기반 자연어 처리 엔진을 활용하여 정확한 음성 입력 의존도를 낮춘다.
• 시스템은 표준 스프레드시트 환경에 통합되었으며, 참가자들이 일반적인 감사 작업을 수행하도록 테스트되었다.
• 통제된 사용자 연구를 통해 iVoice와 주요 상용 음성 인식 시스템 간 동일한 작업과 지표를 사용하여 비교하였다.
• 작업 성능은 작업 완료 시간, 오류 수, 사용자 만족도 측면에서 측정되었다.
• 두 시스템 간 성능 차이를 비교하기 위해 통계 분석을 적용하였다.

실험 결과

연구 질문

• RQ1 iVoice는 스프레드시트 탐색에 있어 주요 상용 음성 인식 시스템과 비교해 작업 완료 시간에서 어떻게 다른가?
• RQ2 일반적인 감사 작업을 수행할 때 iVoice의 오류율은 상용 시스템과 비교해 어떻게 되는가?
• RQ3 iVoice는 스프레드시트 탐색 중 RSI를 앓는 사용자의 인지적 및 신체적 부담을 어느 정도 감소시키는가?
• RQ4 사용자들은 기존 음성 인식 시스템과 비교해 iVoice의 직관성과 사용성에 대해 어떻게 평가하는가?

주요 결과

• iVoice는 주요 상용 음성 인식 시스템 대비 평균 작업 완료 시간을 35% 감소시켰다.
• iVoice를 사용할 경우 작업 실행 오류율이 상용 시스템 대비 52% 낮았다.
• 사용자들은 iVoice가 자연어 명령을 정확히 해석할 수 있다는 점 덕분에 더 높은 만족도를 보였다.
• iVoice는 비연속적인 범위 선택이나 특정 데이터 포인트로 이동과 같은 복잡한 탐색 작업에서 뛰어난 성능을 보였다.
• 시스템의 규칙 기반 해석 엔진 덕분에 정확한 발음 의존도가 감소하여, 언어 장애가 있는 사용자에게도 유리했다.
• 참가자들은 특히 시간 압박 상황에서 반복적인 감사 작업에 대해 iVoice가 더 신뢰할 만하고 효율적이라고 평가했다.