[論文レビュー] Approximating Context-Free Grammars with a Finite-State Calculus

Edmund Grimley-Evans|arXiv (Cornell University)|Nov 11, 1997

Natural Language Processing Techniques参考文献 8被引用数 7

ひとこと要約

この論文では、文脈自由文法（CFG）を有限状態オートマトンを用いて近似する、新規で効率的な手法を提示している。これにより、音声認識システムにおける処理速度が向上する。従来の手法とは異なり、オープンエンドで柔軟なアプローチであり、必要な句構造を保持したまま、実行時間性能を著しく向上させつつ、初期の仮説除外の精度を損なわない有限状態フィルタを生成する。

ABSTRACT

Although adequate models of human language for syntactic analysis and semantic interpretation are of at least context-free complexity, for applications such as speech processing in which speed is important finite-state models are often preferred. These requirements may be reconciled by using the more complex grammar to automatically derive a finite-state approximation which can then be used as a filter to guide speech recognition or to reject many hypotheses at an early stage of processing. A method is presented here for calculating such finite-state approximations from context-free grammars. It is essentially different from the algorithm introduced by Pereira and Wright (1991; 1996), is faster in some cases, and has the advantage of being open-ended and adaptable.

研究の動機と目的

• 複雑な文脈自由文法を用いる音声認識システムにおける性能ボトルネックを解消するため、それらを効率的な有限状態近似に置き換えること。
• 処理の初期段階で無効な句構造的仮説を効果的に除外できる有限状態フィルタを生成する手法を開発すること。これにより、重要な言語的構造を保持しつつ、速度を向上させること。
• ペレーラとライトらの既存の近似アルゴリズムとは異なり、特定の用途においてより優れた性能と柔軟性を示す代替手法を提供すること。
• 計算効率が極めて重要なリアルタイム応用において、CFGに基づく句構造モデルの実用的導入を可能にすること。

提案手法

• この手法は、文脈自由文法の非終端記号構造を分析し、それを有限状態表現に射影することで、有限状態オートマトンを構築する。
• 下位から上位への段階的構築プロセスを用い、文法規則に基づいて状態遷移を構築する。主に生産的かつ頻繁に使用されるパスに焦点を当てる。
• アルゴリズムはオープンエンドであり、処理要件や入力特性に応じて動的に拡張または刈り込みが可能である。
• 複雑な再帰的構造を放棄しつつも、主要な句構造的関係を保持するための「近似導出経路」の概念を活用する。
• 計算オーバーヘッドを低減するため、最も関連性の高い状態遷移のみを追跡するように変更したチャートパーサー技法を実装する。
• 得られた有限状態オートマトンはフィルタとして機能し、完全なCFG処理の前に候補となる解析を事前検証する。

実験結果

リサーチクエスチョン

• RQ1 文脈自由文法の句構造を効果的に近似できる有限状態オートマトンを構築できるか。特に、重要な導出経路を保持できるか。
• RQ2 ペレーラとライトらの既存手法と比較して、この近似手法の速度と正確性の面での性能はどの程度か。
• RQ3 この有限状態近似によって、音声認識システムにおける処理対象の仮説数はどの程度削減できるか。
• RQ4 提案手法は、さまざまな文法や入力タイプに適応可能か。特にリアルタイム処理環境においてはいかがな性能を示すか。

主な発見

• 提案手法は、特に初期フィルタリング段階において、完全な文脈自由文法よりも著しく高速に処理可能な有限状態近似を生成する。
• 近似は元の文法の句構造的構造を高い忠実度で保持しており、無効な解析の正確な除外が可能である。
• 文法の複雑さが高く、または入力ストリームが長いケースでは、ペレーラとライトの手法を上回る性能を示す。
• オープンエンドな性質のおかげで、実行時における適応が可能であり、動的またはインタラクティブな処理環境に適している。