[논문 리뷰] New Musical Interfaces and New Music-making Paradigms

Sergi Jordà|arXiv (Cornell University)|2020. 10. 04.

Music Technology and Sound Studies참고 문헌 6인용 수 13

한 줄 요약

이 논문은 연주, 작곡, 인터페이스 설계 분야에서 10년 이상의 경험을 바탕으로 예술적 표현과 인간-컴퓨터 상호작용을 융합하여 새로운 음악 인터페이스 설계를 위한 개념적 프레임워크를 제시한다. 신체적, 제스처 기반, 상호작용 기반의 시스템을 통해 음악 제작의 새로운 패러다임을 도입하며, 실제 구현 사례를 통해 연주자-도구 관계를 재정의하고 디지털 음악에서의 표현 가능성의 범위를 넓힌다.

ABSTRACT

The conception and design of new musical interfaces is a multidisciplinary area that tightly relates technology and artistic creation. In this paper, the author first exposes some of the questions he has posed himself during more than a decade experience as a performer, composer, interface and software designer, and educator. Finally, he illustrates these topics with some examples of his work.

연구 동기 및 목표

• 새로운 음악 인터페이스 설계에서 기술, 예술적 창작, 인간-컴퓨터 상호작용의 만남을 탐색하기 위해.
• 전통적인 음악 인터페이스의 한계를 해결하고 표현력과 상호작용을 향상시키는 대안적 패러다임을 제안하기 위해.
• 혁신적인 인터페이스 설계를 통해 연주자의 직관과 기술적 반응성 사이의 격차를 메우기 위해.
• 미래의 신규 음악 표현을 위한 인터페이스(NIME) 연구 및 개발을 위한 반성적이고 경험 기반의 기초를 제공하기 위해.

제안 방법

• 연주자, 작곡가, 인터페이스 디자이너로서의 10년 이상의 실무 경험을 바탕으로 개념적 프레임워크를 형성하기 위해.
• 인간-컴퓨터 상호작용(HCI)과 사운드 디자인의 통찰을 통합하여 새로운 상호작용 모델을 개발하기 위해.
• 실시간으로 표현적인 음악 연주를 지원하는 신체적 및 제스처 기반 인터페이스를 설계하고 프로토타yped하기 위해.
• 신체성과 직접 조작 원리를 적용하여 직관적이고 반응성이 뛰어난 음악 악기 창출을 위해.
• 반복적 설계와 연주 테스트를 통해 인터페이스의 반응성과 표현력을 정교화하기 위해.
• 원형 인터페이스 시스템의 실제 사례와 그 공연 현장 적용 사례를 문서화하여 이론적 개념을 구체화하기 위해.

실험 결과

연구 질문

• RQ1 연주자의 신체적 및 표현적 의도를 더 잘 반영할 수 있도록 새로운 음악 인터페이스는 어떻게 설계될 수 있는가?
• RQ2 기술이 음악 제작의 공창적 파트너로 재정의될 때, 어떤 새로운 상호작용 패러다임이 등장하는가?
• RQ3 신체적, 제스처 기반, 신체적 상호작용이 뮤지션과 악기 간의 관계를 어떻게 변화시키는가?
• RQ4 기존 컨트롤러를 초월하여 디지털 악기에서 더 높은 표현력과 반응성을 가능하게 하는 설계 원칙은 무엇인가?
• RQ5 예술가, 엔지니어, 연구자 간의 다학제적 협업은 어떤 방식으로 혁신적인 음악 제작 방식을 이끌 수 있는가?

주요 결과

• 제스처, 촉각, 신체성에 중점을 둔 새로운 음악 인터페이스는 디지털 음악 연주에서 표현력과 즉각성을 크게 향상시킨다.
• 예술적 직관과 기술적 반응성의 통합은 더 직관적이고 몰입감 있는 연주 경험을 가능하게 한다.
• 레엑터블(Reactable)과 같은 타당성 있는 인터페이스 프로토타입은 공간적이고 협업 기반의 상호작용 모델이 실시간으로 복잡한 음악 창작을 지원할 수 있음을 보여준다.
• 표현력에 중점을 두고 기술적 정밀도만을 추구하지 않는 공통의 반복적 개발 과정은 디자이너와 연주자 모두에게 유익하다.
• 음악 제작에서 상징적 상호작용에서 신체적 상호작용으로의 전환은 기존 컨트롤러로는 이룰 수 없었던 새로운 형태의 음악 표현을 가능하게 한다.
• 이 논문의 개념적 프레임워크는 후속 NIME 분야의 연구 및 개발에 영향을 미치며, 상호작용 음악 시스템 분야의 미래 혁신을 위한 기반을 마련했다.