[論文レビュー] Emotion Analysis Platform on Chinese Microblog

Duyu Tang, Bing Qin+2 more|arXiv (Cornell University)|Mar 28, 2014

Sentiment Analysis and Opinion Mining参考文献 13被引用数 4

ひとこと要約

本稿では、中国のWeiboマイクロブログのための感情分析プラットフォーム（EAP）を提案し、中国の各省でリアルタイムの感情トレンドを監視する。絵文字、感情用語辞書、感情変化ルールを組み合わせることで、EAPは感情分類において80%のマクロ精度を達成した。Sichuan地震の事例研究および手動アノテーション実験により検証された。

ABSTRACT

Weibo, as the largest social media service in China, has billions of messages generated every day. The huge number of messages contain rich sentimental information. In order to analyze the emotional changes in accordance with time and space, this paper presents an Emotion Analysis Platform (EAP), which explores the emotional distribution of each province, so that can monitor the global pulse of each province in China. The massive data of Weibo and the real-time requirements make the building of EAP challenging. In order to solve the above problems, emoticons, emotion lexicon and emotion-shifting rules are adopted in EAP to analyze the emotion of each tweet. In order to verify the effectiveness of the platform, case study on the Sichuan earthquake is done, and the analysis result of the platform accords with the fact. In order to analyze from quantity, we manually annotate a test set and conduct experiment on it. The experimental results show that the macro-Precision of EAP reaches 80% and the EAP works effectively.

研究の動機と目的

• 膨大でリアルタイムのWeiboデータを地理的地域ごとの感情トレンド分析する課題に対処すること。
• 1日数十億件のWeiboメッセージを低レイテンシで処理できるスケーラブルなプラットフォームを開発すること。
• マイクロブログデータを用いて、中国における時間的・空間的公的感情の監視を可能にすること。
• 実世界の事例研究および手動評価を通じて、プラットフォームの有効性を検証すること。

提案手法

• プラットフォームは、Weiboメッセージにおける直接的な感情指標として絵文字を採用する。
• 独自に構築した感情用語辞書を統合し、語句やフレーズに感情スコアを割り当てる。
• 否定や強調語など文脈依存の感情変化に対応するため、感情変化ルールを適用する。
• システムはリアルタイムでツイートを処理し、地理的省ごとに感情データを集計する。
• 精度、再現率、F1スコアの指標を用いて性能を評価するため、手動でアノテートされたテストセットを用意する。
• 時間的・空間的感情動態の評価を目的として、Sichuan地震の事例研究を用いてプラットフォームを評価する。

実験結果

リサーチクエスチョン

• RQ1 中国の各地域でWeiboデータを用いて、リアルタイムの感情トレンドを効果的に監視する方法は何か？
• RQ2 中国のマイクロブログにおける感情分類に最適な言語的手がかり（絵文字、用語辞書、ルール）の組み合わせは何か？
• RQ3 自然災害などの大規模な出来事の際、プラットフォームは現実の感情反応をどの程度正確に反映できるか？
• RQ4 手動アノテートテストセット上で評価した場合、感情分類システムの正確性はどの程度か？

主な発見

• 感情分析プラットフォームは、手動アノテートテストセットで80%のマクロ精度を達成しており、分類性能が優れていることが示された。
• プラットフォームはSichuan地震の際、実際の公的感情と整合するリアルタイムの感情変化を的確に捉えた。
• 各省における感情分布には明確な地域的パターンが見られ、公的気分の地理的監視が可能になった。
• 絵文字、感情用語辞書、変化ルールの統合により、ベースライン手法に比べて感情検出の正確性が著しく向上した。
• システムは、大規模なWeiboデータストリームにおいてもスケーラビリティとリアルタイム処理能力を示した。
• 事例研究により、プラットフォームが大規模な社会的出来事における事実の感情反応を反映できることを確認した。