[논문 리뷰] Open Badges: A Low-Cost Toolkit for Measuring Team Communication and Dynamics

Oren Lederman, Dan Calacci외 4명|arXiv (Cornell University)|2017. 10. 05.

Data Visualization and Analytics참고 문헌 8인용 수 14

한 줄 요약

Open Badges는 맞춤형 하드웨어 배지 또는 스마트폰을 사용하여 실시간으로 대면 팀 소통 및 상호작용을 측정하는 오픈소스이자 저비용 툴킷을 제시한다. 이 시스템은 음성 볼륨과 블루투스 저전력(BLE) 근접도를 활용하여 발언 전환, 반응 패턴, 상호작용 균형 등을 추적한다. 이 시스템은 그룹 상호작용 지표, 예를 들어 발언 시간 불균형과 참가 균형도를 실시간으로 시각화할 수 있으며, 연구자들이 자연스러운 환경에서 팀 성과를 연구하고 간섭 조치를 테스트할 수 있도록 확장 가능하고 편향을 줄이는 도구를 제공한다.

ABSTRACT

We present Open Badges, an open-source framework an toolkit for measuring and shaping face-to-face social interactions using either custom hardware devices or smart phones, and real-time web-based visualizations. Open Badges is a modular system that allows researchers to monitor and collect interaction data from people engaged in real-life social settings. In this paper we describe the technical aspects of the Open Badges project and the motivation for its creation.

연구 동기 및 목표

• 자연스러운 환경에서 실시간으로 대면 팀 상호작용을 측정할 수 있는 저비용이고 오픈소스 플랫폼을 개발하는 것.
• 발언 전환과 근접도와 같은 비언어적 사회 신호를 자동화하여 연구 편향과 노동을 줄이는 것.
• 팀 역학을 실시간으로 피드백하고 시각화하여 팀 성과 향상에 기여하는 간섭 조치를 지원하는 것.
• 연구자들이 팀 소통과 집단지능에 대한 대규모 연구를 위해 모듈식이고 접근 가능한 툴킷을 제공하는 것.
• 웨어러블 상호작용 측정이 다양한 학술 및 응용 환경에서 가능하도록 하여 사회측정 연구의 영향 범위를 넓히는 것.

제안 방법

• 시스템은 참가자들로부터 음성 볼륨과 블루투스 LE(BLE) 근접도 데이터를 캡처하기 위해 웨어러블 전자 배지 또는 안드로이드 스마트폰을 사용한다.
• 발언 이벤트는 볼륨 변조를 분석하여 감지되며, 짧은 저음량 이벤트는 데이터 품질 향상을 위해 필터링된다.
• 각 참가자의 발언 전환은 시작 및 종료 시간이 기록되어 전환 빈도와 지속 시간을 계산할 수 있다.
• BLE 비콘은 신호 세기(RSSI)를 기반으로 참가자 간의 물리적 거리를 추정하고, 등록된 팀 구성원 간의 데이터만 포함하도록 필터링된다.
• 오디오 및 BLE 소스에서 유입된 데이터는 RESTful API를 통해 저장되고 노출되어 후속 분석 및 시각화에 활용된다.
• 웹 기반 시각화 플랫폼은 API를 소비하여 실시간 및 이력 기반의 피드백을 생성하며, 시간 축 차트, 네트워크 시각화, 발언 전환 불균형과 같은 지표를 포함한다.

실험 결과

연구 질문

• RQ1 저비용 오픈소스 웨어러블 기기들이 실제 팀 환경에서 발언 전환과 반응 패턴과 같은 핵심 사회적 상호작용 신호를 효과적으로 측정할 수 있는가?
• RQ2 팀 상호작용 지표의 실시간 시각화가 팀 성과, 참여도, 신뢰도를 얼마나 향상시킬 수 있는가?
• RQ3 다양한 팀 환경에서 발언 전환의 균형이 팀 성과와 집단지능과 어떻게 관련되어 있는가?
• RQ4 스마트폰 기반 데이터 수집이 팀 역학 측정에서 전용 하드웨어 배지와 비교해 유사한 정확도와 신뢰성을 달성할 수 있는가?
• RQ5 실시간 피드백이 팀 상호작용 패턴과 그룹 내 공정성 인식에 어떤 영향을 미치는가?

주요 결과

• Open Badges 시스템은 저비용 하드웨어와 스마트폰을 사용하여 실시간 발언 전환 데이터와 근접도 정보를 성공적으로 캡처하여 팀 상호작용 패턴을 신뢰성 있게 측정할 수 있다.
• 시스템은 발언 전환 수, 반응 패턴, 발언 시간 불균형과 같은 핵심 지표를 계산할 수 있는 충분한 정확도로 발언 이벤트를 감지한다.
• 독립적인 오디오 볼륨 추적을 통해 동시 발언 이벤트를 식별할 수 있으며, 참가자 간의 겹침 비율을 계산할 수 있다.
• BLE 비콘에서 유도된 근접도 데이터는 물리적 거리에 대한 근사적이지만 효과적인 추정치를 제공하여 공간적 상호작용 분석을 지원한다.
• 웹 기반 시각화 플랫폼은 동적 시각화를 통해 실시간 피드백을 제공하며, 주도적인 발언자 쪽으로 움직이는 중심 구슬과 참가 균형도를 반영한 네트워크 그래프를 포함한다.
• 플랫폼은 이력 데이터 재생과 사용자 설정 가능한 시각화를 지원하여 실시간 간섭 조치와 후행 분석 모두에 적합하다.