連語辞書の自動作成と評価

概要

論文の詳細を見る
日本語解析に連語(単語の共起関係)を利用することで解析精度を向上させることができる。しかし、実際に連語を利用するにあたっては、連語のデータをどのようにして収集するかという点が大きな問題となる。田中は、技術文献・新聞記事などから手作業によって共起関係データを抽出している。手作業による作成はデータの信頼性が高いが、作成のためのコストが非常に大きいという問題がある。それを解決するために、テキストを解析し自動的に共起関係を抽出する方法も提案されている。この方法の問題は、解析の精度などの関係から誤ったデータが抽出されることにある。そこで誤りを減らすために、抽出対象として解析結果の曖昧さの少ない部分を使ったり、対象テキストを限定するなどの対策がとられている。筆者らは、かな漢字変換の解析精度を向上させるために大量の連語を用意するという方針を立てて検討を行っており、そのための手段のひとつとして形態素解析を利用した自動抽出方式を検討してきた。本方式では誤ったデータの抽出を抑さえるために、単語の品詞に基づいたヒューリスティックな規則を利用している。本稿では、ヒューリスティックな規則を用いた抽出方式を提案し、作成した辞書の評価結果について報告する。
一般社団法人情報処理学会の論文
1992-09-28

連語辞書の自動作成と評価

スポンサーリンク

概要

著者

関連論文

スポンサーリンク