質問応答システムの比較と評価
スポンサーリンク
概要
- 論文の詳細を見る
本稿では, いくつかの質問応答システムを独立に作成し, 50問の質問文に対する性能評価を行なった結果を報告する.質問応答システムは1999年のTREC-8のQAタスクの開催以降注目を集めており, 次のような点で従来の情報検索や情報抽出と異なっている.従来の情報検索では, 質問に対する答えを文書の単位で列挙していたが, 質問応答システムは質問の答えを記述した部分を返す.また, 従来の情報抽出は対象分野と抽出項目があらかじめ限定されていたが, 質問応答では, 抽出する項目が質問文により自由に決まる点で異なっている.本稿は, 今後の質問応答システム研究の参考とするため, 日本語QAシステムの性能のベースラインを探るとともに, 日本語QAシステムの比較・評価法を紹介するものである.
- 社団法人電子情報通信学会の論文
- 2000-10-20
著者
-
加藤 恒昭
NTTコミュニケーション科学基礎研究所
-
佐々木 裕
The University Of Manchester
-
賀沢 秀人
NTTコミュニケーション科学基礎研究所
-
廣田 啓一
Nttコミュニケーション科学基礎研究所
-
平尾 努
NTTコミュニケーション科学基礎研究所
-
平 博順
NTTコミュニケーション科学基礎研究所
-
磯崎 秀樹
日本電信電話株式会社 Ntt コミュニケーション科学基礎研究所
-
磯崎 秀樹
NTTコミュニケーション科学基礎研究所
-
佐々木 裕
Ntt情報通信網研究所
-
佐々木 裕
NTTコミュニケーション科学基礎研究所
-
中島 浩之
NTTコミュニケーション科学基礎研究所
関連論文
- 現代用語辞書を用いた流行コンセプト作成支援
- 携帯型端末を用いた音声自動翻訳システムとフィールド実験(モバイルと放送の融合時代を迎えて(1セグ放送, モバイル放送, 携帯放送融合サービス, 1セグ対応携帯端末, モバイルコンテンツと放送コンテンツの融合, マルチメディア配信, ディジタル放送受信機, および一般))
- Support Vector Machineによるテキスト分類における属性選択
- 最大マージン原理にもとづく多重トピック文書の自動分類(フィルタリング、文書分類)(テーマ:「Webマイニングによる情報活動と自然言語処理」その他一般)
- 最大マージン原理にもとづく多重トピック文書の自動分類(フィルタリング、文書分類)(テーマ:「Webマイニングによる情報活用と自然言語処理」その他一般)
- 音声翻訳研究の展開(機械翻訳)
- NTCIRにおける質問応答技術の評価と今後の展望(NTCIR特別セッション)
- DSIUシステム : Decision Support for Internet Users : ネット情報を使ってホットなものをあなたに (近未来チャレンジ)
- モデル検査に基づく知識・信念の推定(「定理証明, 推論関係の新技術」)
- テキスト要約の自動評価(テキストの自動評価)
- 抜粋による複数文書要約を評価するためのコーパスと評価指標
- NTCIRにおける質問応答技術の評価と今後の展望(NTCIR特別セッション)
- 現代用語辞書を用いた流行コンセプト作成支援
- 生成・識別モデルの統合に基づく半教師あり学習法とその多重分類への応用
- F値最大化学習に基づく文書の多重ラベリング(機械学習)
- 高次元特徴空間に適した半教師あり条件付確率場の検証(機械学習)
- 携帯型端末を用いた音声自動翻訳システムとフィールド実験
- 機械翻訳システム評価法の最前線
- 識別学習による組合せ最適化問題としての文短縮手法
- 単一言語コーパスにおける文の自動対応付け手法(自然言語)
- 階層非循環有向グラフカーネル(情報論的学習理論論文)
- SVMを用いた学習型質問応答システムSAIQA-II(自然言語)
- 単語属性N-gramと統計的機械学習による質問タイプ同定(自然言語)(「インタラクション:理論,技術,応用,評価」)
- 機械学習のための組み合わせ素性の選択基準について(分類、クラスタリング,機械学習)
- 言語パターンに着目した複数文書要約(要約)
- 機械学習のための組み合わせ素性の選択基準について(分類、クラスタリング, 機械学習)(言語理解とコミュニケーション)
- 言語パターンに着目した複数文書要約(言語理解とコミュニケーション)
- 機械学習のための組み合わせ素性の選択基準について
- 言語パターンに着目した複数文書要約
- 素性選択機能をもったString Kernelの提案(パタン発見)(セマンティックウェブと自然言語処理その他一般)
- 素性選択機能をもった String Kernel の提案
- 階層構造を利用したテキスト間類似度の効率的計算法
- LE-10 統計的機械学習を用いた質問タイプ同定(E. 自然言語・文書)
- SAIQA : 大量文書に基づく質問応答システム
- SAIQA : 大量文書に基づく質問応答システム
- 聞き役対話システムの構築を目的とした聞き役対話の分析
- 構文情報に依存しない文短縮手法
- 生成・識別モデルの統合に基づく半教師あり学習法とその多重分類への応用
- 投票型回帰モデルによる要約の自動評価法
- 辞書式順序を持つペナルティによるゼロ代名詞解消(自然言語)
- 拡張ストリングカーネルを用いた要約システムの自動評価法(自然言語,情報処理技術のフロンティア)
- 最大マージン原理に基づく多重ラベリング学習(自然言語処理)
- 文書要約の自動評価手法の提案と評価(セグメンテーション・要約)
- 生物医学文献からの遺伝子機能フレーズの抽出(抽出,マイニング)
- 1M-4 テキスト構造の持つ意味に着目した推論規則獲得法
- ネット情報を使った意思決定支援DSIUでの知識獲得技術(近未来チャレンジ特集)
- 2000-NL-138-1 コメント生成のための情報統合法の提案
- NLC2000-10 コメント生成のための情報統合法の提案
- 第6回 : インターネットと知識推論
- スキーマのない状況下での情報伝達と知識構築 (2) : 事前知識と説明トピックの関連性
- 概念ベースの情報検索への適用 : 概念ベースを用いた検索の特性評価
- 「納得感」のある研究を目指して(編集委員今年の抱負2011)
- 文書要約における抽出単位と評価法についての考察(要約)
- 音声認識と音声翻訳の国際的共通評価基盤構築に向けて
- 参加者から見たNTCIR(NTCIR : 情報アクセスに関わるテキスト処理技術の評価ワークショップ)
- ブリッジプレイの終盤における必勝戦術の論理的考察
- 総合学習による質問応答システムの新しい構成法 : CLQAに向けて(質問応答)(テーマ:「Webマイニングによる情報活動と自然言語処理」その他一般)
- 総合学習による質問応答システムの新しい構成法 : CLQAに向けて(質問応答)(テーマ:「Webマイニングによる情報活用と自然言語処理」その他一般)
- 対話的制約充足手法による制約プログラミングの実現
- 多人数対話の特徴分析--情報交換パターンと主導権の観点から
- 手続き型言語によるプロダクションシステム制御手法のCAIシステムへの適用と評価
- 6 バイオ自然言語処理のための機械学習技術(ポストゲノム時代に高まるバイオ自然言語処理への期待 : バイオ自然言語処理最新事情)
- COLING-2000参加報告
- 文書情報からの分野オントロジー構築の支援
- 質問応答システムの比較と評価
- F値
- オントロジー主導による情報抽出 (「オントロジーの基礎と応用」)
- オントロジ主導による情報抽出の検討
- 4M-3 情報抽出を目的としたテキスト構造解析
- 質問応答システム:SAIQA--何でも答える物知り博士 (特集論文1 高度検索技術)
- E-6 固有表現を利用した大量文書の時系列ブラウジング法(要約・情報検索,E.自然言語・文書)
- 質問に適応した文書要約手法とその評価
- 世界図書館を飲み込む次世代ヒューマノイド--知識処理と言語処理の新しい展開 (特集論文1 人にやさしい対話型コンピュータ)
- AAAI-99参加報告
- 型付き論理プログラムの正例からの学習
- 生物医学文献からの遺伝子機能フレーズの抽出(抽出, マイニング)(言語理解とコミュニケーション)
- 概念検索に基づく技術内容からのエキスパートの推定
- 発想誘導型情報検索システムを開発--言葉の意味に基づく文書検索と情報活用を可能に
- 汎用的な意味解析技術への挑戦 (特集 ポータルサービスを支える自然言語処理技術)
- TD-3-3 SVMのテキスト分類への応用(TD-3. 天下無敵のサポートベクトルマシン?)
- 生物医学文献からの遺伝子機能フレーズの抽出
- 生物医学質問応答システム(bio-QA)の提案
- 生物医学質問応答システム(bio-QA)の提案
- トランスダクティブ・ブースティング法によるテキスト分類
- テキスト分類 : 学習理論の「見本市」(情報論的学習理論とその応用)
- トランスダクティブ・ブースティング法によるテキスト分類
- SVMに基づく固有表現抽出の高速化
- Support Vector Machineによるテキスト分類
- ポータルサービスを支える検索技術 (特集論文1 高度検索技術)
- 文書要約における抽出単位と評価法についての考察(言語理解とコミュニケーション)
- TD-3-2 なぜSVMを使うのか? : ユーザーから見た利点(TD-3. 天下無敵のサポートベクトルマシン?)
- 順位づけ学習問題 : 順位つきサンプルを用いた順序関係推定
- 順位づけ学習問題 : 順位つきサンプルを用いた順序関係推定
- ILPにおける仮説言語の型付き論理プログラムへの拡張
- 阿部重夫, パターン認識のためのサポートベクトルマシン入門, pp.204, 森北出版, 2011
- 高橋誠, かけ算には順序があるのか(岩波科学ライブラリ), pp.128, 岩波書店, 2011
- RHB^+ : 正例に基づく型付ILPシステム
- 特集「ポスト経験主義の言語処理」にあたって
- 少ない要素で「理解」する(編集委員今年の抱負2013)
- 画像検索を用いた語義別画像付き辞書の構築