[논문 리뷰] The Prospects for e-Examinations in Nigeria and Australia

Olawale Surajudeen Adebayo, Shafi’i Muhammad Abdulhamid외 1명|arXiv (Cornell University)|2014. 04. 07.

Online and Blended Learning참고 문헌 1인용 수 4

한 줄 요약

이 논문은 나이지리아와 호주에서의 전자시험 시스템을 비교 분석하여 상용(еTС) 및 오픈소스 솔루션을 평가하고, 보안, 신뢰성, 이해관계자 간 협업 측면에서의 과제를 규명한다. 두 국가에서의 사용성과 신뢰도를 향상시키기 위해 자격인증 기관과의 강화된 협력 및 맞춤형 시스템 설계를 통한 개선된 전자시험 프레임워크를 제안한다.

ABSTRACT

This paper compares the e-Examination system in Nigeria with that of Australia. We consider the experiences of working with commercial firms such as Electronic Testing Company (eTC) and using open-source software. It is important to foster good relationships with accreditation authorities (such as University Authorities, West African Examination Council (WAEC), Joint Admissions and Matriculation Board (JAMB) etc. and the Tasmanian Qualifications Authority) to assist in the transition from paperbased assessment to post-paper assessment. The paper also considers the relative convenience for students, administrators and lecturer/assessors; and to gauges the reliability and security of the two systems in use. It examines the challenges in conducting e-Examinations in both countries by juxtaposing the systems in the two countries and suggests ways of developing more acceptable e-Examination systems.

연구 동기 및 목표

• 나이지리아와 호주에서의 전자시험 시스템 현황과 과제를 분석하기 위해.
• 상용(еTС) 대비 오픈소스 전자시험 플랫폼의 효과성을 평가하기 위해.
• 학생, 교수, 관리자 모두가 대상이 되는 전자시험의 신뢰성, 보안성, 편의성 수준을 평가하기 위해.
• 양국에서 종이 기반 시험에서 전자시험으로의 전환 과정에서 나타나는 주요 장애요인을 규명하기 위해.
• 기관 및 규제 기관 간 협업을 통해 더 수용 가능하고 지속 가능한 전자시험 시스템을 개발하기 위한 전략을 제안하기 위해.

제안 방법

• 기관의 구현 사례를 바탕으로 나이지리아와 호주의 전자시험 시스템을 비교 분석하기 위한 사례 연구를 수행하였다.
• 기능성과 확장성 측면에서 상용 전자시험 소프트웨어(еTС)와 오픈소스 대안을 평가하였다.
• WAEC, JAMB, 태즈만리아 자격인증청과 같은 자격인증 기관과의 협력을 통해 기관 간 일치성과 준수 여부를 평가하였다.
• 학생, 교수, 관리자로부터 사용성, 보안성, 신뢰성에 대한 피드백을 수집하고 분석하였다.
• 국가적 맥락에서 인프라 제약, 디지털 리터러시 부족, 정책 격차 등 체계적 과제를 규명하였다.
• 이해관계자 참여, 기술적 견고성, 규제 통합을 바탕으로 전자시험 개발 프레임워크를 제안하였다.

실험 결과

연구 질문

• RQ1 나이지리아와 호주에서의 전자시험 시스템은 보안, 신뢰성, 사용성 측면에서 어떻게 비교될 수 있는가?
• RQ2 양국에서 종이 기반 시험에서 전자시험으로의 전환 과정에서 나타나는 주요 과제는 무엇인가?
• RQ3 상용 전자시험 플랫폼(e.g., еTС)과 오픈소스 솔루션은 기관 평가 요구사항을 충족시키는 데 얼마나 효과적인가?
• RQ4 자격인증 기관은 전자시험의 도입을 촉진하거나 저해하는 데 어떤 역할을 하는가?
• RQ5 기관적 및 기술적 전략은 전자시험 시스템의 수용성과 지속 가능성 향상에 어떻게 기여할 수 있는가?

주요 결과

• еTС와 같은 상용 플랫폼은 오픈소스 대비 더 높은 신뢰성과 보안성을 보였지만, 더 낮은 유연성과 더 높은 비용이 있었다.
• 오픈소스 전자시험 시스템은 더 높은 맞춤형 설계가 가능했지만, 더 강력한 기술 지원과 기관의 투자가 필요했다.
• 나이지리아에서는 WAEC와 JAMB와 같은 자격인증 기관과의 협력이 합법성 확보와 도입 촉진에 핵심적이었다.
• 호주에서는 태즈만리아 자격인증청이 전자시험 관행의 표준화와 준수 보장을 위해 핵심적인 역할을 하였다.
• 사용자 친화적이고 접근성이 확보된 시스템일 경우, 학생과 교수는 전자시험의 편의성을 더 높게 평가하였다.
• 보안성과 신뢰성 문제는 여전히 주요 장애물이었으며, 특히 인터넷 접근성과 인프라가 불안정한 나이지리아에서 두드러졌다.