[論文レビュー] Prosodic entrainment in dialog acts

Uwe D. Reichel, Katalin Mády+1 more|arXiv (Cornell University)|Oct 30, 2018

Speech and dialogue systems参考文献 45被引用数 5

ひとこと要約

本研究は、協力的および競争的ゲームタスクにおける会話的対話行動のリズミカルな一致（プロソディック・エントレインメント）を調査し、対話行動ごとのイントネーション、エネルギー、リズム特徴を分析する。協力的状況では、頻度が高く、権威を持つ対話行動（特に知識に基づくもの）において、一致が顕著に高くなることが判明した。これは、共同タスクの成功を支援するために、意図的で目的指向的なプロソディック・アライメント制御が行われていることを示している。

ABSTRACT

We examined prosodic entrainment in spoken dialogs separately for several dialog acts in cooperative and competitive games. Entrainment was measured for intonation features derived from a superpositional intonation stylization as well as for rhythm features. The found differences can be related to the cooperative or competitive nature of the game, as well as to dialog act properties as its intrinsic authority, supportiveness and distributional characteristics. In cooperative games dialog acts with a high authority given by knowledge and with a high frequency showed the most entrainment. The results are discussed amongst others with respect to the degree of active entrainment control in cooperative behavior.

研究の動機と目的

• 協力的および競争的ゲーム対話における対話行動のプロソディック・エントレインメントを調査すること。
• 対話行動の特性（権威、頻度、予測可能性など）がエントレインメントパターンに与える影響を検討すること。
• エントレインメントが自動的プロセスであるのか、社会的相互作用において意図的制御を含むのかを特定すること。
• イントネーション、エネルギー、リズムといったプロソディック特徴が、会話における社会的調整をどのように媒介するかを明らかにすること。
• エントレインメントが構造化された対話タスクにおける通信成功にどのように寄与するか、あるいは妨げられるかを評価すること。

提案手法

• 協力的および競争的ゲームタスクに参加する被験者からの自然な会話データを収集した。
• F0、ピッチアクセント、エネルギーの連続的特徴を抽出するために、重ね合わせ型イントネーションスタイル化法を適用した。
• 隣接する発話間の音声的類似性を測定することで、エントレインメントを測定した。
• 発話の機能的役割に基づき対話行動を分類（例：発射（EX）、確認（CL）、バックチャンネル（BC）など）、権威、支援性、頻度の次元に割り当てた。
• 対話条件（協力的対比競争的）および対話行動特性がエントレインメントレベルに与える影響を検証するため、統計的モデリングを用いた。
• 符号付きおよび符号なし同期測定を用いて、エントレインメントとディエントレインメントを区別し、絶対的アライメント強度に焦点を当てた。

実験結果

リサーチクエスチョン

• RQ1 協力的および競争的ゲーム状況において、異なる対話行動におけるプロソディック・エントレインメントはどのように変化するか？
• RQ2 頻度、権威（知識対執行権）、局所的予測可能性といった対話行動特性がエントレインメントにどの程度影響を与えるか？
• RQ3 会話におけるプロソディック・エントレインメントは主に自動的プロセスであるのか、それとも社会的調整において意図的制御を含むのか？
• RQ4 イントネーション、エネルギー、リズム特徴は、機能的会話ユニットにおけるエントレインメントパターンにどのように寄与するか？
• RQ5 エントレインメントは、構造化された会話においてタスク成功や通信効率を促進するか、あるいは妨げるか、その役割は何か？

主な発見

• 協力的ゲームでは、知識に基づく権威の高い対話行動において顕著なプロソディック・エントレインメントが観察されたが、執行権に基づく対話行動ではディエントレインメントが生じた。
• 協力的状況における頻度の高い対話行動では、特にイントネーションとエネルギー特徴において、より強いエントレインメントが観察され、滑らかな会話遷移を支援した。
• 競争的ゲームでは、EXおよびCL行動において、特徴セットACC（ピッチアクセント関連）がディエントレインメントを示した。これは、情報処理を隠蔽する戦略的行動である可能性を示唆している。
• 高頻度で知識に基づく対話行動では、協力的対話においてエントレインメントが顕著に高まり、共同タスク目標の達成を支援する意図的プロソディック・アライメントが行われていることが示された。
• 局所的対話行動の予測可能性はエントレインメントに有意な影響を及ぼさず、協力的状況における不確実性がディエントレインメントを引き起こすという仮説は裏付けられなかった。
• 対話行動および状況ごとのエントレインメントパターンの差異は、プロソディック・エントレインメントが純粋に自動的であるのではなく、協力行動において意図的で戦略的な制御を含むという強力な証拠を示している。