[论文解读] Prosodic entrainment in dialog acts

Uwe D. Reichel, Katalin Mády+1 more|arXiv (Cornell University)|Oct 30, 2018

Speech and dialogue systems参考文献 45被引用 5

一句话总结

本研究探讨了在合作与竞争游戏任务中，会话对话行为的韵律同频现象，分析了不同对话行为中语调、能量和节奏特征的同频情况。研究发现，在合作情境下，频繁且具有高权威性的对话行为（尤其是基于知识的对话行为）表现出更高的同频现象，表明个体主动、有目标地控制韵律对齐，以支持共同任务的成功。

ABSTRACT

We examined prosodic entrainment in spoken dialogs separately for several dialog acts in cooperative and competitive games. Entrainment was measured for intonation features derived from a superpositional intonation stylization as well as for rhythm features. The found differences can be related to the cooperative or competitive nature of the game, as well as to dialog act properties as its intrinsic authority, supportiveness and distributional characteristics. In cooperative games dialog acts with a high authority given by knowledge and with a high frequency showed the most entrainment. The results are discussed amongst others with respect to the degree of active entrainment control in cooperative behavior.

研究动机与目标

• 探究合作与竞争游戏互动中对话行为的韵律同频现象。
• 考察对话行为属性（如权威性、频率和可预测性）对同频模式的影响。
• 确定韵律同频是自动过程还是涉及社会互动中的主动控制。
• 探讨语调、能量和节奏等韵律特征在对话中促进社会协调的作用。
• 评估同频在结构化对话任务中对沟通成功的影响。

提出的方法

• 收集参与者在合作与竞争游戏任务中自发产生的口语对话数据。
• 应用叠加式语调风格化方法，提取包括基频（F0）、语调重音和能量轮廓在内的韵律特征。
• 使用相邻话语之间的声学相似性度量来衡量同频程度。
• 根据功能角色对对话行为进行分类：驱逐（EX）、澄清（CL）、回应话轮（BC）等，并将其分配至权威性、支持性和频率维度。
• 使用统计建模方法检验对话情境（合作 vs. 竞争）及对话行为属性对同频水平的影响。
• 通过有符号与无符号同步度量区分同频与不同步现象，重点关注绝对对齐强度。

实验结果

研究问题

• RQ1 在合作与竞争游戏情境中，不同对话行为的韵律同频现象如何变化？
• RQ2 对话行为属性（如频率、权威性（知识型 vs. 执行型）和局部可预测性）在多大程度上影响同频现象？
• RQ3 对话中的韵律同频主要是自动过程，还是涉及社会协调中的主动控制？
• RQ4 语调、能量和节奏特征如何共同影响功能对话单元中的同频模式？
• RQ5 同频在促进或阻碍结构化对话中的任务成功与沟通效率方面发挥何种作用？

主要发现

• 在合作游戏中，基于知识的高权威性对话行为表现出显著的韵律同频，而基于执行权威的对话行为则导致不同步现象。
• 合作情境中频繁的对话行为表现出更强的同频现象，尤其体现在语调和能量特征上，有助于实现更平滑的对话转换。
• 在竞争游戏中，特征集ACC（与语调重音相关）在EX和CL行为中均表现出不同步现象，表明其可能是一种隐藏信息处理的策略。
• 在合作对话中，高频且基于知识的对话行为表现出显著更高的同频程度，表明个体主动进行韵律对齐以支持共同任务目标。
• 对话行为的局部可预测性对同频无显著影响，否定了不可预测性驱动合作中不同步现象的假设。
• 不同对话行为与情境下的同频模式差异提供了有力证据，表明韵律同频并非纯粹自动过程，而是涉及合作行为中主动的战略性控制。