[논문 리뷰] An Argument-based Creative Assistant for Harmonic Blending

Μάξιμος Καλιακάτσος-Παπακώστας, Roberto Confalonieri외 3명|arXiv (Cornell University)|2016. 03. 06.

Music Technology and Sound Studies참고 문헌 23인용 수 6

한 줄 요약

이 논문은 음악학자들이 코드 진행 특성에 대한 사용자 정의된 논거를 통해 조화의 혼합를 평가하고 개선할 수 있도록 돕는 논거 기반 창의적 보조자를 제시한다. 개념적 혼합 이론을 사용하여 두 음악적 양식을 결합함으로써 새로운 조화 공간을 생성하며, 사용자가 지정한 논거가 혼합된 진행의 순위 매기기와 선택을 이끌어내어 상호작용적이고 음악학적으로 정보를 반영한 피드백 루프를 통해 음악적으로 의미 있고 조정 가능한 조화 혁신을 이룬다.

ABSTRACT

Conceptual blending is a powerful tool for computational creativity where, for example, the properties of two harmonic spaces may be combined in a consistent manner to produce a novel harmonic space. However, deciding about the importance of property features in the input spaces and evaluating the results of conceptual blending is a nontrivial task. In the specific case of musical harmony, defining the salient features of chord transitions and evaluating invented harmonic spaces requires deep musicological background knowledge. In this paper, we propose a creative tool that helps musicologists to evaluate and to enhance harmonic innovation. This tool allows a music expert to specify arguments over given transition properties. These arguments are then considered by the system when defining combinations of features in an idiom-blending process. A music expert can assess whether the new harmonic idiom makes musicological sense and re-adjust the arguments (selection of features) to explore alternative blends that can potentially produce better harmonic spaces. We conclude with a discussion of future work that would further automate the harmonisation process.

연구 동기 및 목표

• 음악에서 개념적 혼합의 계산적 접근을 통해 새로운 조화 공간을 평가하고 이끌어내는 데 도전 과제를 해결하기 위해.
• 음악학자들이 혼합 과정 중에 코드 진행 특성에 대한 음악적 기준(논거)을 표현하고 조정할 수 있도록 상호작용 가능한 도구를 제공하기 위해.
• 분야 전문 지식을 평가 과정에 통합하여 계산 창의성과 음악학적 전문성 간 격차를 메우기 위해.
• 논거 기반 평가를 통한 반복적 개선을 지원하는 시스템을 프로토타입화하여 향후 자동화의 길을 열기 위해.

제안 방법

• 시스템은 개념적 혼합 이론(Fauconnier & Turner, 2002)을 사용하여 두 조화 양식의 진행을 결합하여 새로운 혼합 진행을 생성한다.
• 코드 진행은 구간 내용, 음선 이동, 功能 역할 등 일련의 특성으로 기술되며, 이 특성들이 혼합 과정을 정의하는 데 사용된다.
• 사용자는 진행의 원하는 특성에 대해 질문에 응답함으로써 논거를 지정하며, 이는 혼합 알고리즘에서 기능의 활성화/비활성화를 가능하게 한다.
• 시스템은 사용자 논거를 기반으로 가중치가 부여된 순위 매기기 메커니즘을 사용하여 혼합된 진행을 평가하며, 개념적 혼합의 최적성 원칙과 일치한다.
• 그래픽 사용자 인터페이스(GUI)를 통해 음악학자들은 논거를 반복적으로 조정하고 결과로 나타나는 조화 공간의 음악학적 일관성을 평가할 수 있다.
• 평가와 매개변수 설정 간의 루프를 닫음으로써 향후 자동화를 지원하도록 설계되었으며, 메타 수준의 논거를 통한 자가 개선이 가능하다.

실험 결과

연구 질문

• RQ1 개념적 혼합을 통해 생성된 새로운 조화 공간의 음악적 의미를 평가하는 데 음악학자들이 어떻게 지원받을 수 있는가?
• RQ2 코드 진행 특성에 대한 사용자가 지정한 논거가 혼합된 진행의 선택과 순위 매기기에서 어떤 역할을 하는가?
• RQ3 논거가 어떻게 효과적으로 계산 창의성 시스템에 통합되어 조화 혼합에서 음악학적 전문성을 반영할 수 있는가?
• RQ4 사용자 평가와 시스템 생성 간의 상호작용을 어떻게 더 민첩하고 반복적으로 만들 수 있어 창의적 탐색을 향상시킬 수 있는가?
• RQ5 조화 혼합 시스템에서 논거 및 평가 루프의 향후 자동화 잠재력은 어떠한가?

주요 결과

• 사용자가 진행 특성에 대한 논거를 지정함으로써 음악학자들이 상호작용적으로 조화 혼합을 개선할 수 있었으며, 이는 더 음악적으로 일관되고 의도적인 조화 혁신을 이끌어냈다.
• 사용자가 정의한 논거는 혼합 진행의 순위 매기기와 선택에 크게 영향을 미치며, 다양한 조화 공간에 대한 타겟된 탐색을 가능하게 했다.
• 논거 기반 평가 메커니즘은 혼합 과정을 안내하는 투명하고 해석 가능한 방식을 제공하여 계산 결과를 음악학적 기대와 일치시켰다.
• 음악 전문가들로부터의 초도 피드백은 이 시스템이 도메인 전문 지식을 계산 창의성 워크플로우에 통합하기 위한 프로토타입으로서의 가치를 확인시켰다.
• 이 시스템은 향후 자동화를 위한 실현 가능한 길을 보여주었으며, 평가 피드백이 초도 논거 설정을 개선하는 데 사용되어 수작업 반복을 줄일 수 있음을 시사한다.