[논문 리뷰] Consistency between household and county measures of K-12 onsite schooling during the COVID-19 pandemic

Carly Lupton‐Smith, Goicoechea Eb외 4명|arXiv (Cornell University)|2021. 03. 24.

COVID-19 and Mental Health참고 문헌 7인용 수 4

한 줄 요약

이 연구는 코로나19 팬데믹 기간 동안 페이스북 기반 설문조사를 통해 수집한 가구 수준의 K-12 대면 등교 자가 보고와 공식적인 카운티/지역 수준의 데이터 간 일관성을 평가한다. 연구는 주 수준과 큰 카운티 수준에서 높은 일치도를 확인하여, 페이스북 설문조사를 국가 교육 정책 연구를 위한 신뢰할 수 있는 자료로 활용할 수 있음을 입증한다.

ABSTRACT

The academic, socioemotional, and health impacts of school policies throughout the COVID-19 pandemic have been a source of many important questions that require accurate information about the extent of onsite schooling that has been occurring throughout the pandemic. This paper investigates school operational status data sources during the COVID-19 pandemic, comparing self-report data collected nationally on the household level through a Facebook-based survey with data collected at district and county levels throughout the country. The percentage of households reporting in-person instruction within each county is compared to the district and county data at the state and county levels. The results show high levels of consistency between the sources at the state level and for large counties. The consistency levels across sources support the usage of the Facebook-based COVID-19 Symptom Survey as a source to answer questions about the educational experiences, factors, and impacts related to K-12 education across the nation during the pandemic.

연구 동기 및 목표

• 코로나19 팬데믹 기간 동안 페이스북 기반 설문조사를 통해 수집한 가구 수준의 대면 등교 자가 보고 데이터의 신뢰성 평가.
• 이러한 자가 보고를 공식적인 지역 및 카운티 수준의 학교 운영 상태 데이터와 비교.
• 가구 설문조사가 대규모로 공식적인 학교 재개 지표를 대체로 유효하게 활용할 수 있는지 평가.
• 공식 데이터가 확보되지 않거나 지연될 경우, 설문 기반 데이터를 활용하여 팬데믹 기간 동안 교육적 영향에 대한 핵심 질문에 답하는 데 기여.

제안 방법

• 팬데믹 기간 동안 전국 페이스북 기반 설문조사를 통해 K-12 대면 등교에 관한 가구 수준의 데이터를 수집.
• 주 및 현지 교육 당국으로부터 지역 및 카운티 수준의 공식 학교 운영 상태 데이터 확보.
• 가구 설문 응답을 해당 카운티에 매핑하고, 카운티 수준으로 집계하여 비교.
• 가구 보고와 공식 카운티 수준의 대면 수업 비율 간 상관관계 및 일치도를 평가하기 위해 통계적 방법을 사용.
• 특히 주 수준과 큰 카운티 수준에서 다양한 지리적 규모에서의 일관성 평가.
• 기술통계 및 비교 통계를 활용하여 데이터 소스 간 일치 정도를 정량화.

실험 결과

연구 질문

• RQ1 가구 자가 보고한 K-12 대면 등교 데이터와 공식적인 카운티 수준의 학교 운영 데이터 간 일관성은 어느 정도인가?
• RQ2 페이스북 기반 설문조사가 주 수준과 카운티 수준에서 실제 학교 재개 비율을 어느 정도 정확하게 반영하는가?
• RQ3 가구 보고와 공식 데이터 간 일관성은 카운티 규모나 지리적 지역에 따라 달라지는가?
• RQ4 가구 설문조사 데이터는 팬데믹 기간 동안 학교 정책의 교육적 및 건강 영향을 연구하는 데 신뢰성 있게 활용될 수 있는가?
• RQ5 다양한 인구 밀도에서 자가 보고와 공식 측정치 간 대면 수업의 일치 수준은 어떠한가?

주요 결과

• 주 수준에서 가구 자가 보고와 공식적인 카운티 수준의 대면 등교 데이터 간 높은 일致도를 관찰하였다.
• 큰 카운티에서는 두 데이터 소스 모두 대면 수업 비율의 동일한 추세를 보이며 일관성이 유지되었다.
• 가구 보고와 공식 데이터 간의 일치도는 페이스북 설문조사를 국가 교육 연구를 위한 유효한 데이터 소스로 활용할 수 있도록 충분했다.
• 작은 카운티에서는 이질성이 더 높게 나타났지만, 전체적인 일치 패턴은 여전히 탄탄했다.
• 본 연구는 가구 설문조사 데이터가 팬데믹 기간 동안 미국 전역의 학교 재개 추세를 신뢰성 있게 반영할 수 있음을 확인하였다.
• 공식 데이터가 확보되지 않거나 지연될 경우, 비공식적 설문 기반 데이터를 대규모 교육 영향 연구에 활용할 수 있음을 결과가 뒷받침한다.