[논문 리뷰] A Robotic Prosthesis for an Amputee Drummer

Mason Bretan, Deepak Gopinath외 2명|arXiv (Cornell University)|2016. 12. 13.

Tactile and Sensory Interactions참고 문헌 4인용 수 20

한 줄 요약

이 논문은 전루골 부상 환자 드러머를 위한 착용형 로봇 보조기를 제시하며, 가변 임피던스 제어와 공유 제어를 통해 드럼 연주 중 손가락 유사한 스틱 반동을 시뮬레이션한다. 이 시스템은 음악적 동기화를 가능하게 하며, 음악을 실시간으로 분석하는 자율적인 두 번째 스틱을 통합하여 인간-로봇 협업을 통해 창의성을 향상시키며 사용자의 역할을 대체하지 않는다.

ABSTRACT

The design and evaluation of a robotic prosthesis for a drummer with a transradial amputation is presented. The principal objective of the prosthesis is to simulate the role fingers play in drumming. This primarily includes controlling the manner in which the drum stick rebounds after initial impact. This is achieved using a DC motor driven by a variable impedance control framework in a shared control system. The user's ability to perform with and control the prosthesis is evaluated using a musical synchronization study. A secondary objective of the prosthesis is to explore the implications of musical expression and human-robotic interaction when a second, completely autonomous, stick is added to the prosthesis. This wearable robotic musician interacts with the user by listening to the music and responding with different rhythms and behaviors. We recount some empirical findings based on the user's experience of performing under such a paradigm.

연구 동기 및 목표

• 전루골 부상 환자에게 드럼 연주에 필요한 민감성과 제어력을 복원하고 향상시키는 로봇 보조기 설계를 위한 목표.
• 사용자와 로봇이 음악적 출력을 함께 형성하는 공유 제어를 통해 직관적인 인간-로봇 상호작용을 가능하게 하는 목표.
• 실시간 음악 분석 기반으로 즉흥 연주하는 두 번째 반응형 드럼스틱을 추가함으로써 자율적 로봇 연주 기술의 역할을 탐색하는 목표.
• 동기화 작업과 사용자 피드백을 통해 시스템의 사용성과 음악적 성능을 평가하는 목표.
• 착용형 로봇 연주자가 인간의 창의성을 대체하지 않고 보완하는 방식으로 어떻게 인간의 창의성을 증진시킬 수 있는지 탐구하는 목표.

제안 방법

• 스틱 반동을 조절하기 위해 가변 임피던스 제어를 사용하는 직류 모터를 사용한 보조기.
• 사용자의 근육 신호(EMG)를 통해 스틱 동역학을 영향을 주는 공유 제어 프레임워크로, 실시간으로 임피던스를 조정.
• 음악을 듣고 계산 기반 음악 분석을 통해 보완적인 리듬을 생성하는 두 번째 자율적 드럼스틱을 통합.
• 노트 밀도를 제어하는 EMG 기반 구현을 통해 음악적 행동을 구현하며, 지속적인 근육 수축이 리듬 복잡도를 증가시킴.
• 시작점 감지와 정량화를 통해 사용자가 제공한 리듬 '시드' 패턴을 학습하고 확장.
• 고위 음악적 매개변수(예: 노트 밀도)를 저위 수준의 모터 명령으로 매핑함으로써 신체적 및 인지적 부담을 최소화.

실험 결과

연구 질문

• RQ1 보조기로 유연하고 편안하며 음악적으로 표현력 있는 드럼 연주를 위해 최적의 인간-로봇 상호작용 방식은 무엇인가?
• RQ2 착용형 로봇 연주자가 인간 드러머의 역할을 대체하기보다는 보완하도록 설계할 수 있는 방법은 무엇인가?
• RQ3 실시간으로 음악적으로 의미 있는 반응을 가능하게 하기 위해 가장 효과적인 센서 및 제어 전략은 무엇인가?
• RQ4 인지적 및 신체적 부담 요소가 인간-로봇 협업 능력에 미치는 영향은 무엇인가?
• RQ5 자율적 로봇 스틱이 즉흥 연주와 리듬적 상호작용을 통해 음악적 창의성을 향상시킬 수 있는가?

주요 결과

• 사용자는 음악적 동기화 작업을 성공적으로 완수하여 공유 제어의 효과성과 보조기의 실시간 반응성을 입증하였다.
• 시스템은 자연적인 사지 성능에 비해 더 빠른 속도와 지속성으로 복잡한 리듬을 연주할 수 있도록 했다.
• 자율적인 두 번째 스틱은 음악적으로 일관되고 보완적인 리듬을 생성하여 사용자의 성능을 방해하지 않으면서 전체 음악적 출력을 향상시켰다.
• 실증적 피드백에 따르면 사용자는 로봇을 대체자가 아니라 창의적 협업자로 선호했으며, 특히 자신의 연주에 리듬적 다양성을 반영할 때 더욱 선호되었다.
• EMG 기반의 노트 밀도 제어를 통해 사용자는 리듬 복잡도를 직관적으로 조절할 수 있었으며, 더 강한 근육 신호가 더 예측 가능하고 표현력 있는 방식으로 노트 밀도를 증가시켰다.
• 이 시스템은 착용형 로봇 연주자가 인간의 신체적 한계를 초월한 새로운 리듬 가능성들을 도입함으로써 음악적 표현을 향상시킬 수 있음을 입증하였다.