最長一致法と接続表を用いた形態素解析による語彙情報に決定方式

概要

論文の詳細を見る
本研究は、日本語の文章を形態素解析する事を目的とする。自然言語処理では、まず最初に文字列を単語に分かち書きしなければならないが、日本語は文章中に単語の切れ目となるはっきりした目印が存在しないため、単語の切り出しのための形態解析が必要である。本研究では、右方向最長一致法を用いた形態素解析を行ない、単語の切り出しを試みる。単語辞書のみを用いた形態素解析では、次のような問題が生じる。(1)文字列を切る位置を誤る。例えば、助詞である文字から始まる単語が辞書に存在すると、助詞は切り出しにくい。(2)多品詞語の場合は、どの品詞を選択するべきか分からない。(3)日本語は複合語を作りやすく外来語も多く存在するため、すべての単語を辞書に登録するのは因難である。そのため数多くの未知語が存在する。これらの問題を解決するため、接続表を使用する。接続表は文献から得ずに、新聞の文章を正しく形態素解析して作成した。また、これまでの研究では二つの品詞間の接続表(二連接続表と呼ぶことにする)が使われてきたが、本研究では、三つの品詞間の接続表(三連接続表と呼ぶことにする)を使用し、二連接続表と比較する。
一般社団法人情報処理学会の論文
1992-02-24

最長一致法と接続表を用いた形態素解析による語彙情報に決定方式

スポンサーリンク

概要

著者

関連論文

スポンサーリンク