[논문 리뷰] HandsInAir: A Wearable System for Remote Collaboration

Weidong Huang, Leila Alem외 1명|arXiv (Cornell University)|2011. 12. 08.

Usability and User Interface Design참고 문헌 18인용 수 8

한 줄 요약

HandsInAir는 물체에 직접 닿지 않고 신체 작업 중 수신자에게 제스처를 통해 안내할 수 있는 웨어러블 실시간 원격 협업 시스템을 제안한다. 무선 음향영상 통신과 제스처 인식을 활용하여 환경적 지원 최소화로도 이동성이 뛰어난 환경에서 효과적인 원격 지원을 가능하게 한다.

ABSTRACT

We present HandsInAir, a real-time collaborative wearable system for remote collaboration. The system is developed to support real world scenarios in which a remote mobile helper guides a local mobile worker performing a physical task. HandsInAir implements a novel approach to support mobility of remote collaborators. This approach allows the helper to perform gestures without having to touch tangible objects, requiring little environment support. The system consists of two parts: the helper part and the worker part. The two parts are connected via a wireless network and the collaboration partners communicate with each other via audio and visual links. In this paper, we review related work, describe technical implementation of the system and envision future work for further improvements.

연구 동기 및 목표

• 기존 도구가 비현실적인 이동성과 실제 환경에서의 신체 작업에 대한 원격 안내 과제를 해결하기 위해.
• 물리적 접촉이나 복잡한 인프라 없이 자연스러운 제스처를 통해 원격 보조자가 현장 작업자에게 안내할 수 있도록 하기 위해.
• 다이나믹하고 비정형적인 환경에서 원격 및 현장 협업자 모두의 이동성을 지원하기 위해.
• 고정된 설치물에 의존하지 않고 웨어러블 센서와 무선 통신을 활용하여 환경 의존도를 최소화하기 위해.
• 실시간 음향영상 피드백과 제스처 기반 상호작용을 통해 협업을 향상시키기 위해.

제안 방법

• 원격 보조자와 현장 작업자를 위한 두 부분으로 구성된 웨어러블 시스템을 구축하고, 무선 네트워크로 연결하기 위해.
• 공기 중의 수동 제스처를 인식하여 보조자의 손동작을 행동 가능한 안내 신호로 변환하기 위해.
• 상황 인식과 협업을 유지하기 위해 실시간 음향 및 영상 통신을 통합하기 위해.
• 물리적 물체나 고정 센서에 의존하지 않도록, 최소한의 환경적 지원으로도 시스템이 작동하도록 설계하기 위해.
• 물리적 접촉 없이 자연스럽게 제스처를 사용할 수 있도록 경량 웨어러블 인터페이스를 구현하기 위해.
• 협업 중 실시간 반응성을 유지하기 위해 제스처와 미디어 전송 지연을 최소화하기 위해.

실험 결과

연구 질문

• RQ1 최소한의 환경적 의존도로 이동성과 실제 환경에서의 신체 작업에 대한 원격 협업을 효과적으로 지원할 수 있는가?
• RQ2 공기 중의 제스처 기반 상호작용이 원격 안내에서 물리적 물체 조작을 얼마나 효과적으로 대체할 수 있는가?
• RQ3 원격 및 현장 협업자 간의 실시간 반응성과 협업을 유지하는 데 시스템은 어떻게 기여하는가?
• RQ4 웨어러블 제스처 인식이 원격 지원의 사용성과 직관성에 어떤 영향을 미치는가?
• RQ5 최소한의 환경적 지원으로도 실용적인 환경에서 신뢰성 있고 효과적인 원격 협업을 달성할 수 있는가?

주요 결과

• 시스템은 물리적 접촉이나 환경 수정 없이도 공기 중 제스처를 사용해 실시간 원격 협업을 성공적으로 지원한다.
• 원격 보조자는 직관적인 제스처를 통해 복잡한 신체 작업을 현장 작업자에게 안내할 수 있으며, 이는 작업 명확성과 협업을 향상시킨다.
• 시스템은 저지연 실시간 음향영상 통신을 유지하여 협업자 간 자연스럽고 반응성이 뛰어난 상호작용을 가능하게 한다.
• 웨어러블 설계 덕분에 참가자 모두가 이동성이 뛰어나 동적인 비정형 환경에서도 사용할 수 있다.
• 고정 인프라 의존도를 줄여 다양한 실생활 환경에서의 구현 가능성을 높인다.
• 초기 평가를 통해 실용적 환경에서 제스처 기반 원격 안내의 실현 가능성과 사용성은 확인되었다.