単語共起によるクエリー展開を用いた大規模テキスト検索

概要

論文の詳細を見る
近年のネットワークの発展により、大規模なテキストデータベースを個人単位で使用する機会が生じてきた。このため大規模テキストに対する実用的な情報検索システムに対する要望が高まってきている。本研究所では、GByte級の英語テキストデータに対する情報検索システムを構築した。本システムでは、検索要求文は自然言語で入力し、その検索要求文からクエリーを自動生成し、そのクエリーとドキュメント中の単語とのマッチングを行うことで検索を行う。一般に、情報検索システムでは、検索要求文中に含まれる単語のみを用いてクエリーを生成し、そのクエリーをそのまま用いて検索を行っても、検索者の必要としている文書が十分には検索できないことが知られている。これは、検索要求文と検索対象ドキュメントでは、異なる単語で同一の意味内容を表現していたり、検索要求文中の単語を抽出した時点で要求文の意味内容が損なわれたりすることが主な原因である。クエリーが十分な検索を行うだけの単語をもっていない場合には、クエリー中に検索に必要な単語を追加するために、クエリー展開(Query Term Expansion)を行う必要がある。このクエリー展開の方法としては、シソーラスを用いて同義語等を展開する手法が知られている。本稿では、既存のシソーラスを用いるのではなく、ドキュメント中でクエリー単語と共起する単語を用いてクエリー展開を行う方法を提案する。そして、本手法を実際の情報検索システム中にインプリメントし、Byte単位のドキュメントを用いて検索を行い、その検索精度の評価を行ったのでその評価結果についても報告を行う。
一般社団法人情報処理学会の論文
1996-03-06

単語共起によるクエリー展開を用いた大規模テキスト検索

スポンサーリンク

概要

著者

関連論文

スポンサーリンク