[논문 리뷰] Worksheets for Guiding Novices through the Visualization Design Process

Sean A. McKenna, Alexander Lex외 1명|arXiv (Cornell University)|2017. 09. 17.

Data Visualization and Analytics참고 문헌 16인용 수 13

한 줄 요약

이 논문은 시각화 설계 과정의 네 핵심 활동—이해, 아이디어 도출, 제작, 구현—을 안내하기 위해 구조화된 설계 워크시트를 소개한다. 이는 초보자 시각화 설계자에게 실천 가능한 단계별 지침을 제공한다. 13명의 대학원생을 대상으로 한 수업 평가에서 워크시트는 학생들의 참여도, 명확성, 아이디어 생성 능력을 향상시켰지만, 피드백을 통해 데이터 탐색, 코드 구조화, 평가 단계에 대한 추가 워크시트가 필요하다는 점이 드러났다.

ABSTRACT

For visualization pedagogy, an important but challenging notion to teach is design, from making to evaluating visualization encodings, user interactions, or data visualization systems. In our previous work, we introduced the design activity framework to codify the high-level activities of the visualization design process. This framework has helped structure experts' design processes to create visualization systems, but the framework's four activities lack a breakdown into steps with a concrete example to help novices utilizing this framework in their own real-world design process. To provide students with such concrete guidelines, we created worksheets for each design activity: understand, ideate, make, and deploy. Each worksheet presents a high-level summary of the activity with actionable, guided steps for a novice designer to follow. We validated the use of this framework and the worksheets in a graduate-level visualization course taught at our university. For this evaluation, we surveyed the class and conducted 13 student interviews to garner qualitative, open-ended feedback and suggestions on the worksheets. We conclude this work with a discussion and highlight various areas for future work on improving visualization design pedagogy.

연구 동기 및 목표

• 이론적 설계 프레임워크를 실제 프로젝트에 적용하는 데 어려움을 겪는 초보자 시각화 설계자에게 실용적이고 단계별 지침이 부족한 점을 보완하기 위해.
• 이해, 아이디어 도출, 제작, 구현이라는 추상적인 설계 활동 프레임워크를 교실에서 사용할 수 있는 구체적이고 실천 가능한 워크시트로 전환하기 위해.
• 이러한 워크시트가 대학원 수준의 시각화 수업에서 초보자 설계자를 지원하는 데 효과적인지 평가하기 위해.
• 현재 워크시트 설계의 학생들의 요구사항과 한계를 파악하여 향후 시각화 교육의 교육적 개선을 위한 정보를 제공하기 위해.

제안 방법

• 이해, 아이디어 도출, 제작, 구현의 네 설계 활동에 대응하는 네 가지 구조화된 워크시트를 개발하였으며, 각 워크시트에는 단계별 안내, 프롬프트, 실천 가능한 작업이 포함되어 있다.
• 설계 과정 중 공통적인 실수를 피하고 의사결정을 지원하기 위해 도우미 텍스트, 결과 아이콘, 경고 팁을 포함한 워크시트를 설계하였다.
• 66명의 학생이 참여한 대학원 수준의 시각화 수업에 워크시트를 통합하여, 누적적이고 다중 시각화 기반의 상호작용형 프로젝트를 위한 체계적인 지원 도구로 활용하였다.
• 설문조사와 13명의 깊이 있는 학생 인터뷰를 통해 사용성, 인식된 가치, 향후 개선이 필요한 영역을 평가하였다.
• 학생 피드백을 분석하여, 데이터 탐색, 코드 구조화, 전용 평가 단계에 대한 워크시트 추가 요구가 반복적으로 제기됨을 확인하였다.
• 피드백을 바탕으로 설계 고려사항을 수정하였으며, 팀 협업을 더 효과적으로 지원하기 위해 빈 숫자 필드를 날짜 필드로 대체하고, 지침 아이콘과 팁의 명확성을 향상시켰다.

실험 결과

연구 질문

• RQ1 설계 활동 프레임워크를 기반으로 한 설계 워크시트는 초보자 시각화 설계자가 시각화 설계 과정을 어떻게 지원하는가?
• RQ2 실제 대학원 수준의 시각화 수업에서 이러한 워크시트를 사용하는 데서 나타나는 인식된 이점과 한계는 무엇인가?
• RQ3 설계 과정 지도의 효과를 높이기 위해 학생들이 추가로 요청하는 워크시트 구성 요소나 설계 개선 사항은 무엇인가?
• RQ4 학생들은 워크시트를 어떻게 활용하여 아이디어를 도출하고 작업을 체계화하며 팀으로 협업하는가?
• RQ5 이론적 설계 모델만으로 제공할 때와 비교해 워크시트가 학생들의 참여도와 명확성을 어느 정도 향상시키는가?

주요 결과

• 학생들은 워크시트가 명확하고 실천 가능한 단계를 제공해 설계 과정을 시작할 수 있는 방향을 명확히 하여 혼란을 크게 줄여주었다고 보고했다.
• 워크시트의 체계적인 흐름 덕분에 지침이 없었을 경우보다 더 많은 아이디어를 생성할 수 있었으며, 창의성과 탐색 능력이 향상되었다.
• 많은 학생들이 워크시트가 팀 협업과 멘토링 대화에 효과적이었다고 평가했으며, 한 명은 이 과정이 '직관적인 흐름'을 가지며 '초보자에게 잘 정리되어 있다'고 언급했다.
• 학생들은 지속적으로 추가 워크시트, 특히 데이터 탐색, 코드 구조화, 전용 평가 단계에 대한 워크시트가 필요하다고 요청했으며, 이는 현재 프레임워크가 충족하지 못하는 요구사항을 보여준다.
• 피드백을 통해 도우미 텍스트, 결과 아이콘, 경고 팁이 충분히 활용되지 않았으며, 이는 더 명확한 시각적 표현이나 재구성 필요성을 시사한다.
• 빈 숫자 필드 대신 날짜 필드를 사용하는 것이 학생들 사이에서 더 선호되었으며, 이는 진행 상황 추적과 팀 작업 조율를 더 효과적으로 가능하게 했다.