仮名漢字変換における最近使用語優先学習方式のモデル化

概要

論文の詳細を見る
仮名漢字変換において,最近の変換に使用した語を優先的に扱う学習方式(最近使用語優先学習方式)は,変換性能の向上に大きな効果がある.本研究では,計算機システムの仮想記憶管理におけるワーキングセットの概念を用いて,この学習方式をモデル化し,実際の文章でそれを検証した.モデル化では,学習効果の現れる必要条件が満たされる確率として,学習語生存確率の概念を導入した.この確率は,文章中での単語使用間隔の確率分布と「最近」の定義範囲の長さから計算できる.次に,仮想記憶のようにバッファに単語を登録する方式で最近使用語優先学習を実現し,それを仮名漢字変換に組み込み,単語使用間隔の分布に測定,学習語生存確率の実測を行った.さらに,学習語生存確率と変換精度の関係も調べた.その結果,学習語生存確率は提示したモデルから解析的に求めることができるとともに,バッファの登録可能語数からその近似値が求められることを確認した.また,学習語生存確率と変換率(欲しい変換結果が第1候補である割合)は,正の相関関係にあることも明らかになった.したがって,文章の単語使用間隔の分布をもとにして,学習語生存確率を求めれば,最近使用語優先学習が変換精度に与える効果をかなり解析的に議論することができる.
一般社団法人情報処理学会の論文
1994-03-15

仮名漢字変換における最近使用語優先学習方式のモデル化

スポンサーリンク

概要

著者

関連論文

スポンサーリンク