[논문 리뷰] CovidNet: To Bring Data Transparency in the Era of COVID-19

Tong Yang, Kai Shen외 11명|arXiv (Cornell University)|2020. 05. 22.

Data-Driven Disease Surveillance인용 수 10

한 줄 요약

CovidNet는 자동화된 파이프라인과 기부자 검증을 통해 27개 이상의 국가에서 4,124개 이상의 하위 단위에서 수집한 세밀한 사례 데이터를 집계하는 실시간, 글로벌로 확장 가능한 코로나19 추적 플랫폼이다. 2020년 5월 기준으로 522개 이상의 기관과 2억 명 이상의 고유 방문자를 확보한 개방형, 접근 가능하고 상호작용 가능한 데이터셋을 제공하며, 공중보건, 정책 및 연구 분야에서 중요한 독립적 데이터 원천으로 기능한다.

ABSTRACT

Timely, creditable, and fine-granular case information is vital for local communities and individual citizens to make rational and data-driven responses to the COVID-19 pandemic. This paper presents CovidNet, a COVID-19 tracking project associated with a large scale epidemic dataset, which was initiated by 1Point3Acres. To the best of our knowledge, the project is the only platform providing real-time global case information of more than 4,124 sub-divisions from over 27 countries worldwide with multi-language supports. The platform also offers interactive visualization tools to analyze the full historical case curves in each region. Initially launched as a voluntary project to bridge the data transparency gap in North America in January 2020, this project by far has become one of the major independent sources worldwide and has been consumed by many other tracking platforms. The accuracy and freshness of the dataset is a result of the painstaking efforts from our voluntary teamwork, crowd-sourcing channels, and automated data pipelines. As of May 18, 2020, the project website has been visited more than 200 million times and the CovidNet dataset has empowered over 522 institutions and organizations worldwide in policy-making and academic researches. All datasets are openly accessible for non-commercial purposes at https://coronavirus.1point3acres.com via a formal request through our APIs.

연구 동기 및 목표

• 글로벌 코로나19 팬데믹 기간 동안 실시간으로 정확하고 세밀한 지역 전염병 데이터가 필요한 긴급한 요구를 해결한다.
• 북미 및 기타 자원이 부족한 지역에서 공식 보고의 투명성 격차를 메운다.
• 공중보건 모니터링 및 의사결정에 사용 가능한 신뢰할 수 있고 독립적이며 확장 가능한 데이터 통합 플랫폼을 구축한다.
• 하위 국가 수준에서의 고해상도 역사적 사례 추세에 대한 개방형 액세스를 통해 학술 및 정책 연구를 가능하게 한다.
• 자동화된 데이터 파이프라인과 기부자 검증, 품질 관리 메커니즘을 융합하여 실시간 글로벌 감시를 지원한다.

제안 방법

• 다양한 국가의 공식 및 공공 출처에서 실시간 사례 데이터를 집계하기 위해 자원봉사 기반의 오픈소스 웹 플랫폼을 구축했다.
• 공식 보건당국 및 신뢰할 수 있는 공공 레포지토리에서 지속적으로 데이터를 크롤링하고 표준화하기 위한 자동화된 데이터 파이프라인을 구현했다.
• 특히 데이터 보고가 지연되거나 일관성이 없는 지역에서 공식 보고의 오류를 검증하고 수정하기 위해 기부자 기반의 검증 메커니즘을 통합했다.
• 다층적 품질 관리 적용: 출처 신뢰성 검사, 시간적 일관성 검증, Covid Tracking Project와 같은 다른 독립적 추적자들과의 교차 확인.
• 하위 국가 수준(예: 주, 군, 성)에서의 역동적 사례 곡선과 지역 추세를 표시하기 위한 상호작용 가능한 시각화 도구를 개발했다.
• 비상업적 목적을 위한 전체 역사적 데이터셋에 접근할 수 있도록 개방형 API를 제공하여 연구, 정책 및 제3자 플랫폼에의 통합을 가능하게 했다.

실험 결과

연구 질문

• RQ1 공식 보고가 일관되지 않은 글로벌 팬데믹 기간 동안 실시간 하위 국가 수준의 사례 데이터를 신뢰성 있고 투명하게 집계할 수 있는 방법은 무엇인가?
• RQ2 자동화된 데이터 파이프라인과 기부자 기반 검증을 융합할 경우, 공중보건 감시에서 데이터 정확성과 시기적 적합성이 얼마나 향상될 수 있는가?
• RQ3 고해상도 지리적 데이터가 팬데믹 기간 동안 공적 의사결정, 정책 평가 및 학술 연구에 어떤 영향을 미치는가?
• RQ4 정부 보고가 지연되거나 불완전한 경우, 독립적이고 개방형 액세스가 가능한 데이터 플랫폼이 공식 자료의 중요한 대안으로서 기능할 수 있는가?
• RQ5 글로벌 범위, 多국어, 개방형 데이터 통합이 국제적 공중보건 협력 및 모델링을 뒷받침하는 데 어떤 역할을 할 수 있는가?

주요 결과

• 2020년 5월 18일 기준으로 CovidNet 플랫폼은 2억 번 이상의 방문을 기록하여 광범위한 대중 및 기관의 의존도를 보였다.
• 세계 곳곳의 522개 이상의 기관 및 조직에서 데이터셋을 활용했으며, 위키백과 및 CDC와 같은 주요 플랫폼을 포함하여 그 독립적 데이터 원천으로서의 역할을 확인했다.
• CovidNet는 27개 이상의 국가에서 4,124개 이상의 행정 구역에 대해 실시간 하위 단위 수준의 데이터를 제공했으며, 분석을 위한 역사적 사례 곡선을 제공했다.
• CovidNet은 Dong 등(2020) 및 위키백과와 같은 주요 추적 플랫폼의 원천 데이터 제공자로 자리매김하여 신뢰성과 확장성의 증명이 되었다.
• Covid Tracking Project에서 제공하는 검사 및 입원 데이터 통합으로 인해 지역 팬데믹 평가에 대한 데이터셋의 유용성이 향상되었다.
• 개방형 API와 공식 데이터 요청 절차를 통해 비상업적 접근이 가능해져 학술 연구 및 정책 모델링에 대한 대규모 지원이 이루어졌다.