[논문 리뷰] LASSO: A New Tool to Support Instructors and Researchers

Ben Van Dusen|arXiv (Cornell University)|2018. 12. 05.

Science Education and Pedagogy인용 수 15

한 줄 요약

LASSO는 과학, 기술, 엔지니어링 및 수학(STEM) 교육에서 연구 기반 평가(RBAs)의 사용을 간소화하기 위해 설계된 온라인 플랫폼입니다. 이 플랫폼은 평가의 시행, 채점, 분석 과정을 자동화함으로써 강사들이 연구 기반 평가의 사용을 증가시키고 수업 시간을 절약할 수 있도록 지원합니다. LASSO는 학생 학습 성과에 대해 匿명화되고 범주 기반(노멀라이즈드) 피드백을 제공하여, 높은 품질의 평가 도구의 사용을 촉진합니다.

ABSTRACT

We developed the Learning About STEM Student Outcomes (LASSO) online assessment platform to increase instructor use of research-based assessments (RBAs). LASSO does this by making it easy to collect and analyze high-quality evidence about student learning in their courses. Specifically, LASSO simplifies the process of administering, scoring, and analyzing RBAs and saves class time by automating the process online. Course results are anonymized and aggregated in the LASSO database to provide instructors normative feedback about their student outcomes.

연구 동기 및 목표

• STEM 수업에서 연구 기반 평가(RBAs)의 강사 사용을 증가시키기 위해.
• RBAs의 시행 및 채점 과정에서 발생하는 행정적 부담을 줄이기 위해 온라인으로 프로세스를 자동화하기 위해.
• 학습 성과에 대해 시기적절하고, 익명화된, 범주 기반 피드백을 강사에게 제공하기 위해.
• 집계된 고품질 평가 데이터를 통해 증거 기반 수업 개선을 지원하기 위해.

제안 방법

• LASSO 플랫폼은 STEM 분야의 검증된 연구 기반 평가(RBAs) 라이브러리를 제공합니다.
• 강사들은 간편하게 온라인에서 RBAs를 배정할 수 있으며, 자동 채점 및 즉각적인 점수 산정이 가능합니다.
• 학생들의 응답은 익명화되고 안전한 데이터베이스에 집계되어 비교 분석이 가능합니다.
• 시스템은 개별 수업 결과를 집계된 기준치와 비교하여 범주 기반 피드백 보고서를 생성합니다.
• 익명화 및 집계된 결과의 안전한 저장을 통해 데이터 프라이버시를 유지합니다.
• 기존 수업 워크플로우에 통합될 수 있도록 설계되어 교란을 최소화합니다.

실험 결과

연구 질문

• RQ1 STEM 수업에서 연구 기반 평가(RBAs)의 사용을 강사들이 얼마나 더 많이 채택할 수 있을까?
• RQ2 RBAs의 시행 및 채점 과정을 자동화하면 강사의 부담이 얼마나 줄어들 수 있을까?
• RQ3 집계된 RBAs 데이터에서 유래한 범주 기반 피드백을 통해 강사들이 학생 학습 성과에 대해 유익한 정보를 얻을 수 있을까?
• RQ4 LASSO 플랫폼은 STEM 교육에서 증거 기반 수업 개선을 어떻게 지원할 수 있을까?

주요 결과

• LASSO는 STEM 수업에서 연구 기반 평가의 시행, 채점, 분석 과정을 성공적으로 단순화했습니다.
• 플랫폼은 자동 채점 및 데이터 수집을 통해 평가에 소요되는 수업 시간을 줄였습니다.
• 강사들은 자신의 학생 성과가 집계된 기준치와 비교된 익명화되고 범주 기반 피드백을 수신합니다.
• 시스템은 고품질 평가 데이터에의 접근성을 높여 데이터 기반 수업 결정보조를 지원합니다.
• RBAs 사용을 중앙집중화하고 표준화함으로써, 기관 간 교육 평가의 일관성과 확장성을 증진시켰습니다.
• 표준화된 평가의 반복적 사용을 통해 장기적인 학생 학습 성과 추적을 지원합니다.