[论文解读] Moving to Communicate, Moving to Interact: Patterns of Body Motion in Musical Duo Performance

Laura Bishop, Carlos Cancino-Chacón+1 more|arXiv (Cornell University)|Nov 20, 2019

Neuroscience and Music Perception参考文献 60被引用 88

一句话总结

本研究探讨了钢琴与单簧管二重奏中身体动作模式如何支持音乐协作与互动。通过在不同视觉条件下进行排练和演出时的动作捕捉，研究发现：在时间不稳定的乐段中，视觉互动增加，动作一致性与演奏者间协调性提高，且视觉互动作为社会性激励因素，超越单纯的节拍协调，支持创造性冒险行为和合奏凝聚力。

ABSTRACT

Skilled ensemble musicians coordinate with high precision, even when improvising or interpreting loosely-defined notation. Successful coordination is supported primarily through shared attention to the musical output; however, musicians also interact visually, particularly when the musical timing is irregular. This study investigated the performance conditions that encourage visual signalling and interaction between ensemble members. Piano and clarinet duos rehearsed a new piece as their body motion was recorded. Analyses of head movement showed that performers communicated gesturally following held notes. Gesture patterns became more consistent as duos rehearsed, though consistency dropped again during a final performance given under no-visual-contact conditions. Movements were smoother and interperformer coordination was stronger during irregularly-timed passages than elsewhere in the piece, suggesting heightened visual interaction. Performers moved more after rehearsing than before, and more when they could see each other than when visual contact was occluded. Periods of temporal instability and increased familiarity with the music and co-performer seem to encourage visual interaction, while specific communicative gestures are integrated into performance routines through rehearsal. We propose that visual interaction may support successful ensemble performance by affirming coordination throughout periods of temporal instability and serving as a social motivator to promote creative risk-taking.

研究动机与目标

• 探究身体动作模式如何支持音乐二重奏表演中的沟通与互动。
• 考察音乐结构、排练进程以及视觉接触对动作一致性和演奏者间协调性的影响。
• 区分合奏表演中的沟通性动作（信号传递）与相互互动。
• 探究视觉互动是否在基于音频节拍线索不足的情况下，支持协调，特别是在节奏不规则的乐段中。

提出的方法

• 使用动作捕捉技术记录钢琴与单簧管二重奏在多次演出中的头部与身体动作。
• 演出在三种条件下进行：排练前、排练中和排练后，视觉接触被操控（遮挡 vs. 可见）。
• 通过互相关分析和格兰杰因果关系检验，分析动作动力学的平滑度、振幅以及演奏者间的协调性。
• 根据时间规律性（如无节拍、持音、节奏不规则乐段）对音乐段落进行分类，以比较不同结构特征下的动作模式。
• 追踪排练进程，评估动作一致性与协调性随时间的变化。
• 统计分析比较不同演出阶段与视觉接触条件下的动作特征。

实验结果

研究问题

• RQ1 视觉接触在多大程度上影响音乐二重奏中演奏者身体动作的数量与协调性？
• RQ2 在时间稳定与不稳定音乐乐段中，动作模式有何不同？
• RQ3 排练如何影响动作的一致性与动作的沟通功能？
• RQ4 动作模式在多大程度上反映演奏者间的互动，而非独立的表达性诠释？
• RQ5 当音频线索不足时，视觉互动在支持合奏协调中发挥何种作用？

主要发现

• 当视觉接触可用时，演奏者在演出中表现出显著更多的身体动作，相较于视觉被遮挡时。
• 演奏者间动作协调性在节奏不规则的乐段中最强，表明在时间不稳定的条件下视觉互动增强。
• 随着排练进行，动作一致性提高，表明共享表演惯例正在形成，但在无视觉接触条件下又出现下降。
• 格兰杰因果关系分析显示，在进入段落与无节拍段落中，演奏者之间存在显著的单向动作影响，表明存在主动的视觉互动。
• 随着排练进行，动作与协调性的提升并非仅源于表达性诠释，而是依赖于视觉反馈，表明其在互动中具有功能性作用。
• 视觉互动似乎作为一种社会性激励因素，支持创造性冒险行为，并增强演奏者在不确定或复杂音乐时刻的团结感。