コンパクトなグラムベース索引 : 可変長グラムの固定長コーディング
スポンサーリンク
概要
- 論文の詳細を見る
高速全文検索システムに使用するグラムに基づくの索引を構成するグラムのコード化方法に関する研究である.検索時の高速性を優先するため, コード化グラムは固定長とし, ビット操作など高負荷な処理を避けている.文書を形態素解析し, 必要と思われるグラムのみを索引化することにより, 索引の大きさを抑えている.グラムを構成する各文字に割り当てるビット数は文字の出現頻度をもとに可変とするため, グラムを構成する文字数も可変となる.コンパクト且つ高選択度の索引となることをモデルと解析で示している.日本語の文字を対象とした実験では, 記憶オーバヘッド47.3%で平均時間50msec, しかも実用的に誤検索なしの検索を達成できた.
- 一般社団法人情報処理学会の論文
- 2000-01-24
著者
-
佐藤 隆士
大阪教育大学情報処理センター
-
佐藤 隆士
大阪教育大学
-
佐藤 隆士
大阪教育大学大学院総合基礎科学専攻
-
杉原 和郎
大阪教育大学大学院総合基礎科学専攻数理情報コース
-
八田 直
大阪教育大学大学院総合基礎科学専攻数理情報コース
-
平岩 浩司
大阪教育大学大学院総合基礎科学専攻数理情報コース
関連論文
- 2Y-3 仮想計算機環境を利用した独立性の高いサーバホスティングサービスの実装(システム運用・管理,学生セッション,ネットワーク)
- SQL 質問における基数検査について
- 探索木法とその応用 ( キー検索技法 3)
- テキストデータベースからの文字列のあいまい検索と高速化
- SNS要素を用いた英単語共有型学習システムの開発(セッション1:グループウェア)
- SNS要素を用いた英単語共有型学習システムの開発(セッション1:グループウェア)
- グラムベース全文検索システムの高速化と応用
- グラムベース転置ファイルによる日本語全文検索の高速化
- 木構造を用いた高速な全文検索について
- 2ZB-8 動画投稿共有サイトの教育への利用 : 大阪教育大学の実践例(プログラミング教育・ロボット・動画・仮想空間を用いた教育,学生セッション,コンピュータと人間社会)
- D-031 ログ構造の分割インデックスシステム(データベース,一般論文)
- L-053 大学のユーザ認証システムの統合 : 大阪教育大学の場合(L分野:ネットワーク・セキュリティ)
- D-005 全文検索における精度向上 : 検索語の拡張と削除について(D分野:データベース)
- Web検索におけるリンク構造解析を利用したランキング法(Webリンク)(夏のデータベースワークショップDBWS2004)
- Web検索におけるリンク構造解析を利用したランキング法(セッション6A : Webリンク)(夏のデータベースワークショップ : DBWS2004)
- ホームページ作成を用いた高等学校数学の指導法の開発
- 大阪教育大学キャンパスネットワークGRAPESの構築と運用 II : FDDIループの再構築とATM化への取り組み
- 大阪教育大学キャンパスネットワークGRAPESの構築と運用
- 超並列算計機におけるデータ並べ替えアルゴリズムと要求されるデータ転送能力の見積もり
- 拡張BM法による多段階圧縮ファイルの文字列検索
- n-gramに基づく全文検索システムの分散処理 : 分散索引と自立負荷分散更新
- 多段階に圧縮された補助ファイルを用いた文字列検索
- 多次元クロスバにおける全対全通信とハイパキューブおよび多次元トーラスとの通信能力の比較
- 高速な任意文字列検索
- クライアント・サーバモデルにおけるインクリメンタル質問処理
- 副問合せをもつSQL質問における最適化
- リモートデータベースに対するインクリメンタルSQL質問処理
- 線画図形検索のためのデータ構造とアルゴリズム
- ログ構造に構成された分割インデックス
- XMLDBにおけるデータ更新を考慮したモデル写像アプローチ
- XML-DB用の基数組による節点の番号付け索引構造の実装(XML 1)(夏のデータベースワークショップDBWS2004)
- XML-DB用の基数組による節点の番号付け索引構造の実装(セッション3B : XML1)(夏のデータベースワークショップ : DBWS2004)
- コンパクトなグラムベース索引 : 可変長グラムの固定長コーディング