拡張ハッシュ法における部分文字列検索の設計と実現
スポンサーリンク
概要
- 論文の詳細を見る
ハッシュ関数とファイル構造を局所的に再構成し,あふれを解消する拡張ハッシュ法は,ハッシュ法の検索の高速性を維持し,キー総数が予想できない分野にも応用できるが,任意の文字列を部分文字列として含むキーの検索を効率的に行うことはできない.本論文では,拡張ハッシュ法でこの部分文字列検索を実現するために,まず,特徴ベクトルと呼ばれるビット列をハッシュ値として用いて,トライを構成する.次に,アクセスすべきバケットを決定するための疑似ベクトルを定義し,トライ上で疑似ベクトルに対応した枝のみを走査する限定深さ優先探索法を提案する.さらに,キー数の増加に対応したトライをコンパクトに構成するために,均整ベクトルを導入し,そのベクトルを増進的に生成する手法を提案する.これにより,キーの取扱いに必要なビット数をおさえつつ,限定深さ優先探索法をより効率的に行うことができる.また,探索後に参照されるバケット数を抑制するためにディスクリプタを利用する.本手法は,約10万語の日本語キー集合と約8万語の英語キー集合に対する実験結果より,ディスクリプタだけを利用した拡張ハッシュ法に比べ,読み込みバケット数が60〜90%減少し,検索時間が2〜10倍高速となることが分かった.
- 一般社団法人情報処理学会の論文
- 1997-02-15
著者
-
森田 和宏
徳島大学工学部知能情報工学科
-
青江 順一
徳島大学工学部知能情報工学科
-
獅々堀 正幹
徳島大学工学部知能情報工学科
-
森田 和宏
徳島大学知能情報工学科
-
望月 久稔
大阪府立工業高等専門学校
-
望月 久稔
徳島大学工学部
関連論文
- 複合語の分野連想語の効率的決定法
- 日本語定型表現のパターン記述規則と効率的な照合アルゴリズム
- 意味変化率を考慮した文書短縮方法
- 日本語定型表現の分析と効率的照合アルゴリズム
- 活用語を含む助詞的定型表現の分析
- ダブル配列におけるキー削除の効率化手法
- 探索木法とその応用 ( キー検索技法 3)
- 大規模文書データに対する用例文の効率的検索アルゴリズム
- WWW画像検索システムを用いた関連語の自動収集手法(検索)
- 講義映像配信システムにおける講義映像と資料の対応
- 接頭辞ダブル配列における空間効率を低下させないキー削除法(情報検索)
- ダブル配列におけるキー削除の効率化手法
- ダブル配列における動的更新の効率化アルゴリズム
- 分散音声認識における実時間周波数特性正規化手法(音声言語)
- パターンマッチングマシンの効率的記憶検索法
- 情報倫理教育のための教材「インターネット活用と情報倫理」の作成
- 多属性項目の履歴情報に基づく電子メイル文書のフィルタリング手法
- 多属性項目の履歴情報に基づく電子メイル文書のフィルタリング手法
- 履歴情報を考慮したメイル文書のフィルタリング手法
- WWW画像検索システムにおける有害画像フィルタリング手法
- D-020 WWW画像検索システムにおける有害画像フィルタリング手法(D分野:データベース)
- D-030 WWW画像検索システムを用いた有害サイトURLデータベースの構築手法(D.データベース)
- 距離索引VP-treeにおける解絞り込みの一改良法(基盤・要素技術)(セマンティックウェブと自然言語処理その他一般)
- 距離索引VP-treeにおける解絞り込みの一改良法
- 行置換によるスパース行列の効率的縮小アルゴリズム
- 分野連想語を用いたパッセージ特定手法
- 6A-7 順序木の簡潔表現を用いたトライ辞書の評価(アルゴリズム,一般セッション,ソフトウェア科学・工学,情報処理学会創立50周年記念)
- RD-002 重複レコードの多い大規模トライ辞書の圧縮(データベース,査読付き論文)
- 転置ファイルによる大規模 n-gram データの検索システム
- 転置ファイルによる大規模 n-gram データの検索システム
- 2S-5 共起関係に基づく階層型単語概念体系の動的構築法(自然言語処理一般,学生セッション,人工知能と認知科学)
- 3B-6 ダブル配列による動的辞書の構成と評価(アルゴリズムとその応用,一般セッション,ソフトウェア科学・工学)
- パトリシアトライに対する簡潔な配列表現
- LD_008 ダブル配列におけるキャッシュの効率化(D分野:データベース)
- 2次記憶上のダブル配列の効率的検索法
- キーワードの遅延抽出を考慮した文書検索構造の効率的構成法
- トライ構造を用いた共起情報の効率的検索アルゴリズム
- 特徴ベクトルによる全文検索の一改善法
- 拡張ハッシュ法における部分文字列検索の設計と実現
- トライ構造を用いた共起情報の効率的検索アルゴリズム
- グラフ構造に対する効率的記憶検索法
- 文書レイアウトにおける自動図表配置手法
- 特徴ベクトルを用いた全文検索における高速化手法
- ストリングパターンマッチングマシンの文字列置換への拡張法
- ストリングパターンマッチングマシンの動的構成法
- 片仮名異表記の生成および統一手法
- ストリングパターンマッチングマシンにおける検索キー追加方法
- LRパーサを用いた文字列置換アルゴリズム
- 形態素置換による文書短縮法
- 階層化による2進ディジタル探索(BDS)木の改善
- 拡張ハッシュ法による検索技法の拡張 : 部分文字列検索と順検索への拡張
- 時間推移を考慮した単語の重要度決定手法
- 格構造解析における概念階層の効率的判定アルゴリズム
- キーワード抽出を用いた文書自動分類手法
- パトリシアトライ構造の効率的な圧縮アルゴリズム
- 知識表現モデルMERMにおける定量化の一表現法
- Earth Mover's Distance の高速検索ライブラリ fastEMD の開発
- 字幕付き映像データからの字幕領域の検出手法
- 順位キューを用いた多次元データの高速近傍検索アルゴリズム
- 出現URLの類似性に着目したWWW空間からの関連語自動収集手法(抽出, 言い換え)
- MPEG映像データに対するカットシーンの高速検出手法
- D-040 領域分割画像に基づく言語メタデータの自動生成手法(D.データベース)
- 2進木トライ構造の効率的な圧縮手法
- トライ構造による概念階層の高速判定アルゴリズム
- 階層化概念辞書の高速検索アルゴリズム
- 多次元データの高速近傍検索アルゴリズム(基盤・要素技術)(セマンティックウェブと自然言語処理その他一般)
- 1次元自己組織化マップを用いた高次元データの高速近傍検索
- 1次元自己組織化マップを用いた高次元データの高速近傍検索
- 連載講座「キー検索技法」の編集にあたって
- 大学で育成すべき自然言語処理技術者とは?
- 画像,音声,テキストに対するマルチデータ処理技術の統合化とその応用
- HTML形式の表構造に対する一索引化手法
- WWW空間上に存在する表構造の一索引化手法
- キーワード構成の分析とその応用
- 接続情報を加味した形態素辞書による形態素解析の高速化
- LR(1)構文解析表の動的構成法
- 日本語時間表現の一解釈法
- 日本語文における時間表現の形式化手法
- 携帯電話情報サービスのための新聞記事要約の研究
- 新製品ニュース管理システムのための文と段落のタイプ抽出方法
- 4V-6 技術解説記事データベースのためのXML文書作成ツールの開発
- テキストベースの一提案
- 画像,音声,テキストに対するマルチデータ処理技術の統合化とその応用
- 自然言語インタフェースにおける間接発話文の意図理解法
- 類似用例文の効率的検索手法とその応用
- サポートベクターマシンによる適合性フィードバックを用いた情報検索(情報検索)
- サポートベクターマシンによる適合性フィードバックを用いた情報検索
- 二つのトライを用いた辞書検索アルゴリズム
- トライ構造における共通接尾辞の圧縮アルゴリズム
- 自然言語インタフェースにおける間接発話文の意図理解法
- 自然言語入力に対する知的コマンドインターフェイスICIにおける入力文の意図理解
- 画像知識データベースを用いたWWW画像検索システムの開発(画像検索・映像データベース)
- Non-negative Matrix Factorizationを用いた情報検索モデルの次元圧縮および検索質問拡張
- パージングテーブルによる弱順位パーザの構成法
- 文字列照合マシンを利用した複合語キーワードの効率的抽出法
- パージングテーブルによる弱順位パーザの補足
- 文脈自由言語に対する構文解析部の自動生成
- BCH符号によるミニコンピュータ結合システムの誤り制御
- Non-negative Matrix Factorizationを用いた情報検索
- J-010 接触機能を持つ音声対話ロボットに関する研究(HCI(2),J分野:ヒューマンコミュニケーション&インタラクション)