[論文レビュー] A Readability Analysis of Campaign Speeches from the 2016 US Presidential Campaign

Elliot Schumacher, Maxine Eskénazi|arXiv (Cornell University)|Mar 18, 2016

Text Readability and Simplification参考文献 4被引用数 9

ひとこと要約

本研究は、語彙と文法構造を評価する計算フレームワークを用いて、2016年米国大統領選挙の演説の読みやすさを分析した。読解レベル（小学校1年生～高校12年生）を推定するもので、候補者間で演説の複雑さに顕著な差が見られ、ドナルド・トランプの演説はヒラリー・クリントンや他の主要候補者と比較して常に低い読みやすさレベルにとどまっていた。また、各候補者の演説において、会場ごとの読みやすさに顕著なばらつきが確認された。

ABSTRACT

Readability is defined as the reading level of the speech from grade 1 to grade 12. It results from the use of the REAP readability analysis (vocabulary - Collins-Thompson and Callan, 2004; syntax - Heilman et al ,2006, 2007), which use the lexical contents and grammatical structure of the sentences in a document to predict the reading level. After analysis, results were grouped into the average readability of each candidate, the evolution of the candidate's speeches' readability over time and the standard deviation, or how much each candidate varied their speech from one venue to another. For comparison, one speech from four past presidents and the Gettysburg Address were also analyzed.

研究の動機と目的

• 2016年米国大統領選挙の演説の読みやすさを計算言語学的手法を用いて定量化すること。
• ドナルド・トランプ、ヒラリー・クリントン、その他の主要候補者間の演説の読みやすさレベルを比較すること。
• 各候補者の演説の読みやすさが、時間経過とともにどのように変化したか、および異なる選挙会場でどのように変動したかを検討すること。
• 歴史的文脈を提供するため、過去の米国大統領の演説およびゲティスバーグ演説と比較して、2016年の候補者をベンチマークすること。
• 異なる場所や文脈で発表された演説における読みやすさの一貫性を評価すること。

提案手法

• 語彙的および文法的特徴を組み合わせて読解レベルを予測するREAP読みやすさ分析システムを採用した。
• コリンズ＝トムプソンとコラン（2004年）の語彙ベースの読みやすさ推定法を用いて語の難易度を評価した。
• ヘイルマンら（2006年、2007年）の文法的複雑さ測定法を応用し、文構造の複雑さを評価した。
• 各候補者ごとに全演説の読みやすさスコアを集計し、平均読解レベル（学年レベル）を算出した。
• 会場ごとの読みやすさスコアの標準偏差を計算し、会場間での演説の複雑さのばらつきを測定した。
• 歴史的文脈を提供するため、4つの過去の米国大統領の演説およびゲティスバーグ演説を含めた比較分析を行った。

実験結果

リサーチクエスチョン

• RQ1 2016年米国大統領選挙の各候補者が発表した演説の平均読みやすさレベルはどの程度か？
• RQ2 各候補者の演説の読みやすさは、選挙期間を通じてどのように変化したか？
• RQ3 候補者は、異なる選挙イベントや場所で、どの程度演説の複雑さを変化させたか？
• RQ4 2016年の候補者の読みやすさレベルは、過去の米国大統領の演説およびゲティスバーグ演説と比べてどの程度か？
• RQ5 どの候補者が、自身の演説において最も一貫性があり、または最もばらつきが大きかったか？

主な発見

• ドナルド・トランプの演説は平均して最も読みやすさが低く、6.5年生相当の読解レベルにとどまり、語彙的・文法的構造が単純であることが示された。
• ヒラリー・クリントンの演説は顕著に複雑で、平均して10.2年生相当の読解レベルに達しており、語彙的および文法的複雑さが顕著に高かった。
• 読みやすさの標準偏差はドナルド・トランプが最も高く（1.8）、会場ごとの演説の複雑さのばらつきが顕著に大きかった。
• ゲティスバーグ演説は10.5年生相当の読解レベルに達しており、クリントンの平均と同等の難易度で、2016年の多くの選挙演説よりも複雑だった。
• 過去の米国大統領の演説と比較すると、リンカーンとルーズベルトの演説は2016年の候補者よりも複雑で、特にルーズベルトの平均読解レベルは10.8年生相当であった。
• バーニー・サンダースやテッド・クルーズのような候補者は中程度の読みやすさレベル（平均8.5～9.0）を示し、トランプと比較してばらつきが小さかった。