[논문 리뷰] Participation And performance In 8.02x Electricity And Magnetism: The First Physics MOOC From MITx

Saif Rayyan, Daniel Seaton외 3명|arXiv (Cornell University)|2013. 10. 11.

Online Learning and Analytics참고 문헌 3인용 수 14

한 줄 요약

이 연구는 MITx의 첫 번째 물리학 MOOC인 8.02x의 참가 및 성과를 분석하여 전 세계 43,758명의 수강생을 대상으로 연령, 성별, 교육 수준, 국적 등의 인구통계적 다양성, 유지를 분석하고 시험 성과를 조사한다. 연구 결과 성별 간 유지도 격차가 뚜렷하게 드러났으며, 고학위 소지자일수록 수료율이 높았고, 시간이 지남에 따라 성과가 떨어지는 경향을 보였다. 이는 대규모 온라인 학습 환경에서 물리 교육 연구에 통찰을 제공한다.

ABSTRACT

Massive Open Online Courses are an exciting new avenue for instruction and research, yet they are full of unknowns. In the Spring of 2013, MITx released its first introductory physics MOOC through the edX platform, generating a total enrollment of 43,000 students from around the world. We describe the population of participants in terms of their age, gender, level of education, and country of origin, highlighting both the diversity of 8.02x enrollees as well as gender gap and retention. Using three midterm exams and the final as waypoints, we highlight performance by different demographic subpopulations and their retention rates. Our work is generally aimed at making a bridge between available MOOC data and topics associated with the Physics Education Research community.

연구 동기 및 목표

• MITx의 첫 번째 물리학 MOOC인 8.02x의 참가자 인구통계적 다양성을 연령, 성별, 교육 수준, 국적 측면에서 기술하는 것.
• 초기 등록에서 최종 시험까지의 유지 패턴을 분석하며, 활동 참여도 및 인구통계적 하위군을 중심으로 고려하는 것.
• 시험 점수를 학습 성과의 지표로 삼아, 특히 교육 수준과 성별에 따른 성과 차이를 분석하는 것.
• MOOC 데이터 분석과 물리 교육 연구를 연결하여 대규모 온라인 학습 환경에서의 행동 및 성과 패턴을 규명하는 것.
• 향후 연구를 위한 기초 통찰을 제공하여 학습자 행동, 강의 설계, 대규모 개방형 온라인 강좌에서의 형평성에 기여하는 것.

제안 방법

• 32,504명의 수강생이 작성한 등록 설문지에서 자가 보고한 인구통계적 데이터(연령, 성별, 교육 수준, 국적)를 수집.
• 강사 대시보드에서 성과 지표를 분석하여, 시험 참가 및 점수를 참여도와 성취도의 주요 지표로 사용.
• 클릭스트림 데이터를 활용해 첫 번째 중간고사 이전에 500건 이상의 상호작용 이벤트(예: 영상 재생, 페이지 조회)를 기록한 참가자를 '활동 참가자'로 정의.
• 다음 시험에 응시한 참가자를 '수료자'로, 응시하지 않은 참가자를 '포기자'로 분류하고, 교육 수준과 성별에 따라 평균 시험 점수를 분석.
• 표준 오차를 나타내는 오차 막대를 사용하여, 통계 분석을 통해 다양한 인구통계 하위군 간의 유지율과 성과를 비교.
• 16주 동안 세 번의 중간고사와 최종 시험을 거치는 종단적 접근을 통해 성과 추세와 탈락 패턴을 추적하는 것.

실험 결과

연구 질문

• RQ1 edX의 첫 번째 물리학 MOOC인 8.02x의 수강생 인구통계적 구성은 연령, 성별, 교육 수준, 국적 측면에서 어떻게 되어 있는가?
• RQ2 유지율은 성별과 교육 수준에 따라 어떻게 다를까?
• RQ3 참가자의 교육 배경은 중간고사 및 기말고사 성과와 어떤 관계가 있는가?
• RQ4 16주 동안의 강의 기간 동안 성과 추세와 탈락 패턴은 어떻게 변화하는가?
• RQ5 클릭스트림 데이터로 측정한 활동 참여 수준은 시험 수료 및 성과와 얼마나 관련이 있는가?

주요 결과

• 수강생의 평균 연령은 27.5세였으며, 노령층까지 연장되는 긴 尾(꼬리)를 보여, 비전통적 학습자들의 참여가 두드러졌다.
• 수강생의 16.0%만이 여성으로 나타나 뚜렷한 성별 격차가 확인되었으며, 모든 시험 기준점에서 남성의 유지율이 여성보다 뚜렷이 높았다.
• 박사 학위 또는 전문학위 소지자는 학사 학위 이하 수준의 수강생보다 20% 높은 유지율을 보였다.
• 첫 번째 중간고사 이후 유지율이 크게 감소했으며, 특히 여성 참가자에서 이르기 시작하는 성과 또는 동기 부족 문제로 보였다.
• 평균 시험 점수는 시간이 지남에 따라 약간이지만 통계적으로 유의미하게 감소했으며, 난이도 증가나 학습자 피로로 인한 것으로 보였다.
• 대부분의 참가자들이 기말고사 이전에 탈락했으며, 初기 수강생의 10%만이 최종적으로 자격증을 취득했고, 이는 일반적인 MOOC 탈락 패턴과 일치했다.