ベイジアンフィルタにおける言語知識を用いないトークン抽出方式の提案と評価
スポンサーリンク
概要
- 論文の詳細を見る
近年,社会問題ともなっているスパムメールに対抗するために,ベイズ理論を応用したスパムメールフィルタであるベイジアンフィルタが脚光を浴びている.しかし,社会環境のグローバル化により,多言語環境においても利用可能なスパムメールフィルタが求められている現在において,言語や文字コードの知識を用いないベイジアンフィルタは十分に検討されたとはいえない状況である.そこで本論文では,ベイジアンフィルタに最適な,言語知識を用いないトークン抽出方式の提案と評価を行う.具体的には,電子メールの構造に基づいたトークンへの属性付与や,適切なトークン長のバイト単位N-gramによって,実用的な判別精度を持ったスパムメールフィルタが実現できることを明らかにする.また,言語の異なる複数のメールコーパスを用いた実験によって,言語や文字コードの知識を用いる既存手法との比較を行い,提案手法の有効性を示す.
- 2009-09-15
著者
-
松本 章代
東京工業高等専門学校情報工学科
-
松本 章代
青山学院大学 理工学部
-
藤田 拓也
青山学院大学大学院理工学研究科理工学専攻
-
テュールストマーティンヤコブ
青山学院大学理工学部情報テクノロジー学科
関連論文
- 2-108 東京高専のOBベンチャー企業と教員の連携工学教育 その3 : 在校生への学内インターンシップ体験のOB・教員連携教育(創環プロジェクト)(創学環プロジェクト)((17)産学連携教育(産学間・大学高専間の連携)-II)
- 繰り返し構造を考慮したWebページの見出しの階層構造の解析(セッション2,学生チャレンジ特集)
- 繰り返し構造を考慮したWebページの見出しの階層構造の解析(テーマ:学生チャレンジ特集)
- 表構造における意味的関係に基づくWWW検索性能の向上(Web検索・Webアーカイブ,データ工学論文)
- 検索キーワード間の修飾-被修飾関係の詳細な分析に基づくWWW検索性能の向上(自然言語)
- Webサイトの適応型サイトマップの作成とそのオンラインショッピング支援への応用(セッション4:ビジュアライゼーションとユーザエクスペリエンスの向上,学生チャレンジ特集)
- 表構造における意味的関係に基づくWWW検索精度の向上(セッション2)
- RDFaを用いたメタデータオーサリングシステムの構築(セッション1:メタデータと自動分類、知識支援)
- 4P-1 SVG画像複数人同時編集アプリケーションの開発(情報可視化,学生セッション,データベースとメディア)
- 3N-1 ブラウザに依存しないプレーンテキスト上のWebアノテーション機能(メタデータ活用,学生セッション,データベースとメディア)
- 6M-1 オープンソースを用いたC言語記述スタイルの統計分析の試み(ソフトウェア開発,学生セッション,ソフトウェア科学・工学)
- 4L-7 Rubyにおける文字コード変換環境の向上(要求定義とプログラミング言語・設計・実装,学生セッション,ソフトウェア科学・工学)
- D-15-4 数式の意味解析に基づく基礎数学e-ラーニングシステムの開発(D-15. 教育工学,一般セッション)
- 理工系学生を対象とした技術文書作成支援システム
- 理工系学生を対象とした文章作成能力向上のための支援システム
- 言語知識を用いないスパムメールフィルタに関する考察
- D-15-41 論理的思考力の定着をねらいとした基礎数学e-ラーニングシステムに関する一検討(D-15. 教育工学,一般セッション)
- Web文書を活用したn-gramモデルによる手書き自由記述アンケートの自動認識法(翻訳・応用)
- 授業への復習時間,小テスト,順位付けとその効果(1)教員支援マクロの開発と化学1への適用
- 6-324 東京高専における新入生向け体験重視型専門基礎教育 : その4 情報工学分野 : 情報工学体験教材としてのプログラミング入門(口頭発表論文,(8)ものつくり教育-IX)
- ベイジアンフィルタにおける言語知識を用いないトークン抽出方式の提案と評価
- RDFaを用いたメタデータオーサリングシステムの構築(セッション1:メタデータと自動分類、知識支援)
- D-15-6 基礎数学学習支援システムのための手書き数式解析法の検討(D-15.教育工学,一般セッション)
- 繰り返し構造の検出に基づく Web ページの見出しの階層構造の解析
- Webサイトの適応型サイトマップの作成とそのオンラインショッピング支援への応用(セッション4:ビジュアライゼーションとユーザエクスペリエンスの向上,学生チャレンジ特集)
- ET2009-129 手書き数式解析に基づく基礎数学学習支援システムの開発(障害者教育・特別支援教育/一般)
- 5Q-7 SVuGyを例にしたXML用入出力指定DSLの開発(情報アクセス技術,学生セッション,データベースとメディア,情報処理学会創立50周年記念)
- 4P-4 Rubyにおける文字コード変換の最適化(プログラミング言語,学生セッション,ソフトウェア科学・工学,情報処理学会創立50周年記念)
- Web文書を活用したn-gramモデルによる手書き自由記述アンケートの自動認識法(翻訳・応用)
- 2X-3 限定されたクラスタ集団のスモールワールド性仮説検証実験の試み(人工知能と社会,学生セッション,人工知能と認知科学,情報処理学会創立50周年記念)
- 繰り返し構造の検出に基づくWebページの見出しの階層構造の解析
- 繰り返し構造の検出に基づくWebページの見出しの階層構造の解析
- 繰り返し構造の検出に基づくWebページの見出しの階層構造の解析
- 5ZK-1 C言語用のプログラミングスタイル評価システムの構築(プログラミング教育,学生セッション,コンピュータと人間社会,情報処理学会創立50周年記念)
- 5P-2 教育支援を目標とした遠隔ペアプログラミング環境の構築(プログラミング環境・教育,学生セッション,ソフトウェア科学・工学,情報処理学会創立50周年記念)
- 文構造における検索キーワード間の修飾 : 被修飾関係に基づくWWW検索精度の向上(WWW,テキスト情報の要約と掲示に関わる自然言語処理シンポジウム及び一般)
- 見出しの階層関係を利用したWWW検索精度の改善(WWW,テキスト情報の要約と掲示に関わる自然言語処理シンポジウム及び一般)
- ページ内の意味的係り関係に基づくWWWページ検索結果の絞り込みについて(構文,係り受け解析)
- ページ内の意味的係り関係に基づくWWWページ検索結果の絞り込みについて(構文, 係り受け解析)(言語理解とコミュニケーション)
- D-12-143 毛筆お手本自動生成アルゴリズムを活用した手書き続け字認識に関する一考察(D-12.パターン認識・メディア理解,一般講演)
- 理工系学生の論文作成支援を目的とした文書可視化システム (大学における情報教育の新たな展開--教科「情報」との接続性 及び一般)
- D-15-2 かな文字の構造的分類に基づくかな書道文字列お手本自動生成に関する検討(D-15.教育工学,一般講演)
- 代数幾何符号復号における生成点での留数情報を活用した未知シンドロームの推定に関する研究
- 代数幾何符号復号における生成点での留数情報を活用した未知シンドローム推定の一考察
- 5-105 宿題のE-mail_Reportに伴う学生の自宅学習状況把握とその活用法((2)専門科目の講義・演習-II)
- D-12-58 永字八法に基づく手書き文字認識用辞書の動的構成法(D-12.パターン認識・メディア理解,一般セッション)
- D-12-26 確率ネットワークを用いた手書き文書認識の後処理方式の検討(D-12.パターン認識・メディア理解A(パターンメディアの認識・理解・生成),一般セッション)
- D-12-25 文章表現の癖抽出に基づく手書き文章認識の後処理方式の検討(D-12.パターン認識・メディア理解A(パターンメディアの認識・理解・生成),一般セッション)
- ベイジアンフィルタにおける言語知識を用いないトークン抽出方式の提案と評価 (特集 社会を活性化するコンピュータセキュリティ技術)
- 学生レポートにおける不適切な使われ方をしている接続詞の検出 (ネットワークコンピューティングとこれからの教育・学習環境/一般)
- Skypeを利用した外国語会話訓練システムの構築
- 高齢者の認知症早期発見に向けたAndroid端末による情報システムの準備実証実験と大規模実証実験に向けた調査
- 外国語会話訓練を目的としたSkype音声配信システムの開発 (2013年度 第3回研究会 先進的な第二言語学習支援システム/一般)
- 歪度最大基準に基づく特徴選択法による低品質手書き文字認識手法の検討 (マルチメディア・仮想環境基礎)
- 歪度最大基準に基づく特徴選択法による低品質手書き文字認識手法の検討 (パターン認識・メディア理解)
- 繰り返し構造の検出に基づくWebページの見出しの階層構造の解析 (デジタルドキュメント(DD) Vol.2010-DD-75)
- 繰り返し構造の検出に基づくWebページの見出しの階層構造の解析 (情報学基礎(FI) Vol.2010-FI-98)
- D-12-18 JohnsonSU分布を用いた手書き文字認識用識別関数の改良(D-12.パターン認識・メディア理解A(パターンメディアの認識・理解・生成))