[논문 리뷰] Collaboration Spheres: a Visual Metaphor to Share and Reuse Research Objects

Mariano Rico, Asuncíon Gómez-Pérez외 3명|arXiv (Cornell University)|2017. 10. 16.

Scientific Computing and Data Management참고 문헌 10인용 수 3

한 줄 요약

이 논문은 과학 공동체에서 연구 대상(RO)을 재사용하기 위해 의미적 기술과 공동 필터링을 활용하는 시각적 메타포와 웹 기반 인터페이스인 CollabSpheres를 소개한다. 사용성 전문가와 연구자들을 대상으로 한 평가에서, 이 도구는 높은 사용성, 만족도, 그리고 실용성의 인식을 보였으며, 연결된 데이터와 사회적 유사성에 기반한 직관적이고 탐색적인 검색 경험을 통해 협업과 RO 재사용을 크게 향상시켰다.

ABSTRACT

Research Objects (ROs) are semantically enhanced aggregations of resources associated to scientific experiments, such as data, provenance of these data, the scientific workflow used to run the experiment, intermediate results, logs and the interpretation of the results. As the number of ROs increases, it is becoming difficult to find ROs to be used, reused or re-purposed. New search and retrieval techniques are required to find the most appropriate ROs for a given researcher, paying attention to provide an intuitive user interface. In this paper we show CollabSpheres, a user interface that provides a new visual metaphor to find ROs by means of a recommendation system that takes advantage of the social aspects of ROs. The experimental evaluation of this tool shows that users perceive high values of usability, user satisfaction, usefulness and ease of use. From the analysis of these results we argue that users perceive the simplicity, intuitiveness and cleanness of this tool, as well as this tool increases collaboration and reuse of research objects.

연구 동기 및 목표

• 데이터 집약적 과학 분야에서 연구 대상(RO)을 발견하고 재사용하는 데 증가하는 도전 과제를 해결하기 위해.
• 의미적 및 사회적 관계를 바탕으로 탐색적 검색과 RO 추천을 지원하는 직관적이고 사용자 友好的한 인터페이스를 개발하기 위해.
• 공동체의 시각적 메타포를 통해 연구 대상과 사용자 전문성을 시각화하여 분산된 다원적 연구 팀 간 협업을 향상시키기 위해.
• 실제 과학적 상황에서 CollabSpheres 인터페이스의 사용성, 실용성, 그리고 사용 용이성에 대한 평가를 수행하기 위해.
• 연결된 데이터와 공동 필터링 기법을 통합하여 확장 가능한 의미 인식 기반의 연구 대상 탐색을 가능하게 하기 위해.

제안 방법

• 시스템은 연구자와 그들이 관련된 연구 대상을 반경형으로 상호작용 가능한 인터페이스에 표현하는 '협업 영역(Collaboration Spheres)'이라는 시각적 메타포를 사용한다.
• 연구 대상의 의미적 기술(출처, 워크플로우, 데이터셋, 주석 등)을 모델링하고 저장하기 위해 연결된 데이터 기술을 활용한다.
• 공동 필터링 기반의 추천 시스템이 공유된 관심사, 사용 패턴, 의미적 메타데이터를 바탕으로 사용자 간 및 연구 대상 간 유사도를 계산한다.
• 사용자가 공동체, 연구 대상, 사용자 전문성을 나타내는 영역를 탐색할 수 있도록 허용함으로써 탐색적 검색을 지원한다.
• 초기 프로토타이핑 단계에서 사용성 전문가의 피드백을 통합하고, 최종 버전에 사용자 제안을 반영한다.
• 최종 구현은 시각적 클러스터링, 추천 설명 기능, 드래그 앤 드롭 상호작용(후속 버전에서 구현) 등의 기능을 지원한다.

실험 결과

연구 질문

• RQ1 시각적 메타포는 과학 공동체에서 연구 대상의 탐색 가능성과 재사용에 어떻게 기여하는가?
• RQ2 CollabSpheres 인터페이스는 연구 대상 탐색에서 사용자 만족도, 사용성, 실용성에 어느 정도 기여하는가?
• RQ3 사용자와 연구 대상 간의 사회적 유사성과 의미적 유사성이 과학적 맥락에서 추천의 효과성에 미치는 영향은 어떠한가?
• RQ4 다양하고 분산된 연구 팀을 대상으로 한 탐색적 검색 인터페이스를 설계할 때의 주요 사용성 과제는 무엇인가?
• RQ5 공동 필터링과 의미적 메타데이터 기반의 추천 시스템은 복잡한 과학 워크플로우와 실험 데이터의 재사용을 효과적으로 지원할 수 있는가?

주요 결과

• 5명의 전문가를 대상으로 한 사용성 평가에서 실질적인 디자인 개선 조치가 이뤄져 최종 인터페이스의 명확성과 기능성이 크게 향상되었다.
• 15명의 연구자들을 대상으로 한 사용자 연구에서 모든 사용성 및 만족도 지표에서 높은 평균 점수를 기록했으며, 실용성 평균 점수는 7점 만점에 6.0점이었다.
• 참가자들은 인터페이스를 단순하고 직관적이며 깔끔하다고 평가했으며, 사용 용이성과 인지 부하 감소에 대한 강한 인식을 보였다.
• 도구는 업무 성과 향상(PU-2: 7점 만점에 6.0점)과 효율성 향상(PU-4: 7점 만점에 5.3점)에 매우 유용하다고 인식되어 강력한 실용적 가치를 지닌 것으로 나타났다.
• 자유 형식의 피드백에서는 단일 집중형 시각적 뷰의 가치와 향후 기능 향상 가능성을 위한 영역 간 드래그 앤 드롭의 잠재력이 강조되었다.
• 시스템은 확장 가능한 의미 인식 기반 인터페이스를 통해 정보 과부하를 줄이고, 사용자, RO, 의미적 관계를 시각적으로 연결함으로써 협업 기반의 탐색을 지원했다.