無限語彙の仮名漢字変換(自然言語)
スポンサーリンク
概要
- 論文の詳細を見る
本論文では,確率的言語モデルによる仮名漢字変換において,語彙を事実上無限にする枠組みを提案する.この枠組みにより,未知語であっても,新聞やウェブに表記が現われ,読みが各文字の可能な読みの組合せとなっている限りにおいて変換候補としてあげることが可能になる.さらに,確率的言語モデルにより前後の文脈を考慮して,未知語を含む変換候補に適切な順位を付けることができ,高い変換精度が期待できる.実験では,一般的な分野の確率的言語モデルによる仮名漢字変換システムを別の分野に適応することを行った.実験の結果,提案手法によって適応分野の精度の向上が実現可能であることが示された.特に未知語であっても,正しい変換結果を得ることが可能になったことが提案手法の最大の特徴である.
- 一般社団法人情報処理学会の論文
- 2007-11-15
著者
関連論文
- 単語クラスタリングによる確率的言語モデルの分野適応
- 2000-SLP-32-3 構文構造を反映した確率的言語モデル
- 放送大学コーパスを用いた自由発話の大語彙連続音声認識
- 最大エントロピー法による単語境界確率の推定
- 文字クラスモデルによる日本語単語分割
- 確率的モデルによる仮名漢字変換
- nグラム統計によるコーパスからの未知語抽出
- 日本語生コーパスから自動獲得した未知語と言語モデルによる大語彙連続音声認識([特別セッション]音声言語獲得・学習技術(2), 未知語処理)
- 講義関連コーパスを利用した音声認識システムの自動適応(音声,聴覚)
- N-gramモデルを用いた音声合成のための読みおよびアクセントの同時推定(音声言語,情報処理技術のフロンティア)
- 確率モデルを用いた読み及びアクセント推定(言語解析, 対話)
- 音声認識・理解のための統計的言語処理
- 単語リストと生コーパスによる確率的言語モデルの分野適応(言語の統計モデル)
- 単語リストと生コーパスによる確率的言語モデルの分野適応(言語の統計モデル)
- 確率的単語分割コーパスからの単語N-gram確率の計算(音声言語)
- 無限語彙の仮名漢字変換(自然言語)
- クラスに基づく可変長記憶マルコフモデル
- 自然言語処理 : 基礎と応用, (社)電子情報通信学会(編), 田中穂積(監修), "自然言語処理 : 基礎と応用", (社)電子情報通信学会(1999-03), A5判, 定価(本体5,400円+税)