[논문 리뷰] Content Translation: Computer-assisted translation tool for Wikipedia articles

Niklas Laxström, Pau Giner외 1명|arXiv (Cornell University)|2015. 06. 05.

Wikis in Education and Collaboration참고 문헌 3인용 수 7

한 줄 요약

이 논문은 기계 번역(MT)과 WYSIWYG 편집을 활용하여 위키백과 내부에 직접 통합된 컴퓨터 지원 번역 도구인 컨텐츠 번역(CX)을 제시한다. 이 도구는 원본과 대상 텍스트를 병렬로 편집할 수 있도록 하여 링크 및 카테고리 적응을 위키데이터를 통해 자동화하고, MT 사용량을 추적하여 품질을 확보함으로써 기사 삭제 비율을 1% 미만으로 낮추고, 숙련된 사용자가 번역 작업에서 최대 70%의 시간 절감을 이룰 수 있도록 한다.

ABSTRACT

The quality and quantity of articles in each Wikipedia language varies greatly. Translating from another Wikipedia is a natural way to add more content, but the translation process is not properly supported in the software used by Wikipedia. Past computer-assisted translation tools built for Wikipedia are not commonly used. We created a tool that adapts to the specific needs of an open community and to the kind of content in Wikipedia. Qualitative and quantitative data indicates that the new tool helps users translate articles easier and faster.

연구 동기 및 목표

• 다양한 언어 편의 위키백과 기사 번역을 위한 효과적이고 광범위하게 채택된 도구의 부족을 해결하기 위해.
• 위키백과의 개방적이고 커뮤니티 중심의 성격과 다양한 비동기화 콘텐츠에 맞는 번역 도구를 설계하기 위해.
• 위키데이터를 활용해 링크 및 카테고리 처리와 같은 기술적 작업을 자동화하여 번역 부담을 줄이기 위해.
• 편집되지 않은 MT 콘텐츠로 인한 저품질 번역에 대한 커뮤니티의 우려를 완화하기 위해 MT 사용량을 추적하고 경고 기능을 제공하기 위해.
• 실제 배포 환경에서 도구의 사용성, 효율성, 기사 품질에 미치는 영향을 평가하기 위해.

제안 방법

• 도구는 원본과 대상의 문단 정렬을 동적으로 유지하면서도 마크업을 그대로 보존하는 파소이드의 주석이 달린 HTML 기반의 WYSIWYG 에디터를 사용한다.
• 여러 기계 번역(MT) 제공업체를 통합하며, 오픈소스 Apertium를 포함하여 MT 출력 결과를 사용자가 편집할 수 있는 기반으로 활용한다.
• 위키데이터의 다국어 매핑을 활용해 링크 및 카테고리 적응을 자동화하여 대상 기사가 정확히 참조되도록 보장한다.
• 편집되지 않은 MT 콘텐츠 비율을 추적하고 임계치를 초과할 경우 경고를 발생시켜 품질을 향상시키기 위한 조치를 취한다.
• 사용자 연구는 맥락 기반 관찰과 사용성 테스트를 통해 수행되었으며, 피드백에 기반해 프로토타입을 반복적으로 개선하였다.
• 평가에는 사용자 피드백, 공개 분석 데이터, 기사 삭제 비율을 활용하여 도구의 도입률과 품질을 평가하였다.

실험 결과

연구 질문

• RQ1 다국어로 구성된 위키백과의 공동 창작 환경에 특화된 컴퓨터 지원 번역 도구는 어떻게 설계할 수 있는가?
• RQ2 기계 번역(MT)과 자동 링크 적응 기능을 통합할 경우 번역 속도와 품질에 어느 정도 향상 효과가 있는가?
• RQ3 기사 삭제 비율과 사용자 피드백을 기준으로 볼 때 도구는 기사 품질에 어떤 영향을 미치는가?
• RQ4 기계 번역(MT) 이용 가능성이 비슷하고 사용자 기반도 유사한 상황에서 일부 언어 쌍은 왜 상당히 더 높은 사용률을 보이는가?
• RQ5 기존 번역 워크플로우와 비교했을 때 CX에서의 사용자 행동은 시간 효율성과 작업 부담 측면에서 어떻게 다른가?

주요 결과

• CX를 통해 생성된 기사에 대해 3개월 간의 기간 동안 기사 삭제 비율이 1% 미만으로 유지되었으며, 이는 위키백과 전체 신규 기사 삭제 비율보다 낮은 수준이었다.
• 숙련된 카탈로니아어 위키백과 편집자는 CX를 사용할 경우 번역 시간을 70% 감소시켰다고 보고하여 뚜렷한 효율성 향상을 확인했다.
• 영어가 가장 자주 사용된 원본 언어였으며, 이는 다국어 편집자 행동에 대한 이전 연구 결과와 일치했다.
• Apertium를 통한 기계 번역(MT) 제공에도 불구하고 언어 쌍 간 번역 활동에 상당한 격차가 있었으며, 스페인어에서 카탈로니아어로는 455건의 기사가 번역되었고, 포르투갈어로는 단 25건에 그쳤다.
• 사용자 피드백은 긍정적이었으며, 위키백과 편집 인터페이스에 통합된 도구는 이전의 독립형 도구보다 더 높은 도입률을 보였다.
• 시스템의 MT 추적 및 경고 메커니즘은 저품질 콘텐츠 확산에 대한 커뮤니티의 우려를 완화하는 데 기여했다.