2重マルコフモデルによる日本語文の誤り検出並びに訂正法

概要

論文の詳細を見る
漢字OCRやWP(ワードプロセッサー),さらには音声認識装置などの入力装置を用いて計算機入力を行った日本語文には,一般に誤字,脱落及び挿入誤りが含まれるために,これらの誤りを自動的に検出し正しい日本語文に訂正する技術が必要となる.これまでに,日本語の誤字を対象に単語解析プログラムを用いた誤字検出法並びに1重マルコフモデルによる訂正方法があり,また,日本語文節内の連続した脱落及び挿入誤りで種別が与えられている場合については,m重マルコフ連鎖確率を用いて誤り位置の検出並びに正しい日本語文に訂正するアルゴリズムが提案されている.本論文では,上記のアルゴリズムを,3種類の誤り種別(誤字,脱落及び誤挿入)がわからない場合に対して,適用可能なように拡張する.また,新聞記事の77日文の統計データを用いて2重マルコフ連鎖確率辞書を作成し誤字,脱落及び挿入誤りが混在した文節を対象に誤りの種別と誤りの位置を検出する実験を行い,その有効性を評価する.
一般社団法人情報処理学会の論文
1993-09-16