片仮名異表記の生成および統一手法
スポンサーリンク
概要
- 論文の詳細を見る
自然言語処理システムにおいて,片仮名表記の揺れをいかに効率良く,かつ正確に解消するかは重要な課題である.本論文では,片仮名表記の揺れが外来語特有の表記方法に起因することに着目し,表記の揺れが存在する部分の音(文字列)を整理した片仮名ルールと,このルールが容易に適用可能な正規表記を定義する.そして,片仮名ルールと正規表記を用いた異表記生成手法を提案する.これにより,正規表記のみを辞書登録すればよいため,コンパクトで,かつすべての表記に対応可能な辞書が作成できる.本手法は,入力表記から正規表記を生成する正規表記生成部と正規表記から異表記から異表記を生成する異表記生成部からなる.135個のルールを定義し,約7万語の片仮名データに対して実験評価を行った結果,辞書圧縮率は79.5%,特に表記の揺れを有する語のみに対しては42.6%に圧縮でき,異表記生成処理に関しては99.0%の生成精度が得られ,本手法の有効性を確かめた.また同時に,辞書の保守性,応用性を向上させることもできた.
- 社団法人電子情報通信学会の論文
- 1994-02-25
著者
関連論文
- 複合語の分野連想語の効率的決定法
- 日本語定型表現のパターン記述規則と効率的な照合アルゴリズム
- 意味変化率を考慮した文書短縮方法
- 日本語定型表現の分析と効率的照合アルゴリズム
- 活用語を含む助詞的定型表現の分析
- ダブル配列におけるキー削除の効率化手法
- 探索木法とその応用 ( キー検索技法 3)
- 大規模文書データに対する用例文の効率的検索アルゴリズム
- WWW画像検索システムを用いた関連語の自動収集手法(検索)
- 講義映像配信システムにおける講義映像と資料の対応
- 接頭辞ダブル配列における空間効率を低下させないキー削除法(情報検索)
- ダブル配列におけるキー削除の効率化手法
- ダブル配列における動的更新の効率化アルゴリズム
- 分散音声認識における実時間周波数特性正規化手法(音声言語)
- パターンマッチングマシンの効率的記憶検索法
- 多属性項目の履歴情報に基づく電子メイル文書のフィルタリング手法
- 多属性項目の履歴情報に基づく電子メイル文書のフィルタリング手法
- 履歴情報を考慮したメイル文書のフィルタリング手法
- WWW画像検索システムにおける有害画像フィルタリング手法
- D-020 WWW画像検索システムにおける有害画像フィルタリング手法(D分野:データベース)
- D-030 WWW画像検索システムを用いた有害サイトURLデータベースの構築手法(D.データベース)
- 距離索引VP-treeにおける解絞り込みの一改良法(基盤・要素技術)(セマンティックウェブと自然言語処理その他一般)
- 距離索引VP-treeにおける解絞り込みの一改良法
- 行置換によるスパース行列の効率的縮小アルゴリズム
- 分野連想語を用いたパッセージ特定手法
- RD-002 重複レコードの多い大規模トライ辞書の圧縮(データベース,査読付き論文)
- 転置ファイルによる大規模 n-gram データの検索システム
- 転置ファイルによる大規模 n-gram データの検索システム
- パトリシアトライに対する簡潔な配列表現
- LD_008 ダブル配列におけるキャッシュの効率化(D分野:データベース)
- 2次記憶上のダブル配列の効率的検索法
- キーワードの遅延抽出を考慮した文書検索構造の効率的構成法
- トライ構造を用いた共起情報の効率的検索アルゴリズム
- 特徴ベクトルによる全文検索の一改善法
- 拡張ハッシュ法における部分文字列検索の設計と実現
- トライ構造を用いた共起情報の効率的検索アルゴリズム
- グラフ構造に対する効率的記憶検索法
- 文書レイアウトにおける自動図表配置手法
- 特徴ベクトルを用いた全文検索における高速化手法
- ストリングパターンマッチングマシンの文字列置換への拡張法
- ストリングパターンマッチングマシンの動的構成法
- 片仮名異表記の生成および統一手法
- ストリングパターンマッチングマシンにおける検索キー追加方法
- LRパーサを用いた文字列置換アルゴリズム
- 形態素置換による文書短縮法
- 階層化による2進ディジタル探索(BDS)木の改善
- 拡張ハッシュ法による検索技法の拡張 : 部分文字列検索と順検索への拡張
- 時間推移を考慮した単語の重要度決定手法
- 格構造解析における概念階層の効率的判定アルゴリズム
- キーワード抽出を用いた文書自動分類手法
- パトリシアトライ構造の効率的な圧縮アルゴリズム
- 知識表現モデルMERMにおける定量化の一表現法
- Earth Mover's Distance の高速検索ライブラリ fastEMD の開発
- 字幕付き映像データからの字幕領域の検出手法
- 順位キューを用いた多次元データの高速近傍検索アルゴリズム
- 出現URLの類似性に着目したWWW空間からの関連語自動収集手法(抽出, 言い換え)
- MPEG映像データに対するカットシーンの高速検出手法
- D-040 領域分割画像に基づく言語メタデータの自動生成手法(D.データベース)
- 2進木トライ構造の効率的な圧縮手法
- トライ構造による概念階層の高速判定アルゴリズム
- 階層化概念辞書の高速検索アルゴリズム
- 多次元データの高速近傍検索アルゴリズム(基盤・要素技術)(セマンティックウェブと自然言語処理その他一般)
- 1次元自己組織化マップを用いた高次元データの高速近傍検索
- 1次元自己組織化マップを用いた高次元データの高速近傍検索
- 連載講座「キー検索技法」の編集にあたって
- 大学で育成すべき自然言語処理技術者とは?
- 画像,音声,テキストに対するマルチデータ処理技術の統合化とその応用
- HTML形式の表構造に対する一索引化手法
- WWW空間上に存在する表構造の一索引化手法
- キーワード構成の分析とその応用
- 接続情報を加味した形態素辞書による形態素解析の高速化
- LR(1)構文解析表の動的構成法
- 日本語時間表現の一解釈法
- 日本語文における時間表現の形式化手法
- 携帯電話情報サービスのための新聞記事要約の研究
- 新製品ニュース管理システムのための文と段落のタイプ抽出方法
- 4V-6 技術解説記事データベースのためのXML文書作成ツールの開発
- テキストベースの一提案
- 画像,音声,テキストに対するマルチデータ処理技術の統合化とその応用
- 自然言語インタフェースにおける間接発話文の意図理解法
- 類似用例文の効率的検索手法とその応用
- サポートベクターマシンによる適合性フィードバックを用いた情報検索(情報検索)
- サポートベクターマシンによる適合性フィードバックを用いた情報検索
- 二つのトライを用いた辞書検索アルゴリズム
- トライ構造における共通接尾辞の圧縮アルゴリズム
- 自然言語インタフェースにおける間接発話文の意図理解法
- 自然言語入力に対する知的コマンドインターフェイスICIにおける入力文の意図理解
- 画像知識データベースを用いたWWW画像検索システムの開発(画像検索・映像データベース)
- Non-negative Matrix Factorizationを用いた情報検索モデルの次元圧縮および検索質問拡張
- パージングテーブルによる弱順位パーザの構成法
- 文字列照合マシンを利用した複合語キーワードの効率的抽出法
- パージングテーブルによる弱順位パーザの補足
- 文脈自由言語に対する構文解析部の自動生成
- BCH符号によるミニコンピュータ結合システムの誤り制御
- Non-negative Matrix Factorizationを用いた情報検索