単語マルコフモデルを組み合わせた仮文節境界の補正法

概要

論文の詳細を見る
べた書きの漢字かな混じり文の文節切りにおいては、これまでに高精度な技術が確立されている。しかし、べた書きのかな文の場合には、あらゆる単語候補の組み合わせを考慮して解析しようとすると、一般に探索木が爆発するという問題が生じ、これまでに有効な方法が得られていない。このような問題を解決するために、音節の2重および3重マルコフ連鎖モデルを用いて仮文節境界を推定する方法が提案されている。また、上の方法で推定された仮文節境界に対して、単語辞書引きや品詞接続テーブルを用いた接続検定を行うことによって、仮文節境界を補正する方法も提案され、有効性が示されている。しかしながら、単語辞書引きや品詞接続テーブルを用いた仮文節境界の補正での処理時間は、非常に長く、現在のマシンでは実用性に欠ける。本文では、従来の仮文節境界の補正の結果を損なわずに、処理時間を軽減するために、単語マルコフ連鎖モデルを用いて仮単語境界を推定することによって、仮文節境界を補正する方法を提案する。
一般社団法人情報処理学会の論文
1995-09-20