単一言語コーパスにおける文の自動対応付け手法(自然言語)
スポンサーリンク
概要
- 論文の詳細を見る
一般に, 同じ内容について書かれた異なる文書を対象として, 同一内容の文間に対応付け(アラインメント)を行ったコーパスを作成することができる.こうした対応付けコーパスは, 構文変形規則や言い換え規則など, 文生成に関する知見を得ることができ, 自然言語処理の基盤技術を開発するうえで必須である.特に, 文書要約研究の立場からは, 上記だけでなく, 学習・評価データとしても重要な価値を持つ.こうしたコーパスを大量に収集するためには, 高性能な自動対応付け手法が必要とされる.しかし, 従来手法は, 類似度を計算するためのテキストの基本単位や類似尺度そのものに問題があった.そこで本論文では, 対応付けの基本単位として依存構造木の経路を用い, 各経路に最も類似する経路を有する文を対応文とする手法を提案する.単語の言い換えを吸収するため, 経路を単語とその意味カテゴリからなるノードの系列と見なし, 系列パターンに基づき経路間の類似度を決定する.Text Summarization Challenge(TSC)で作成された単一文書, 複数文書要約のデータを用いて提案手法による対応付け結果を人間による対応付け結果と比較した結果, 単一文書要約データの場合でF値0.95〜0.97程度, 複数文書要約データの場合にF値0.72〜0.83程度という従来手法より高い成績であった.
- 一般社団法人情報処理学会の論文
- 2005-10-15
著者
-
鈴木 潤
日本電信電話株式会社 Nttコミュニケーション科学基礎研究所
-
前田 英作
日本電信電話株式会社NTTコミュニケーション科学基礎研究所人間情報研究部
-
磯崎 秀樹
日本電信電話(株)NTTコミュニケーション科学基礎研究所
-
平尾 努
日本電信電話株式会社NTTコミュニケーション科学基礎研究所
-
磯崎 秀樹
日本電信電話株式会社 Nttコミュニケーション科学基礎研究所
-
磯崎 秀樹
日本電信電話株式会社 Ntt コミュニケーション科学基礎研究所
-
鈴木 潤
日本電信電話株式会社 Ntt コミュニケーション科学基礎研究所
-
平尾 努
日本電信電話株式会社 Ntt コミュニケーション科学基礎研究所
-
前田 英作
NTTヒューマンインタフェース研究所
-
前田 英作
日本電信電話(株)コミュニケーション科学基礎研究所
-
前田 英作
Ntt
関連論文
- 最適化問題としての文書要約
- SVM (Support Vector Machine)を用いた大腸癌の組織分化度における遺伝子発現プロファイル解析
- パーティクルフィルタとこう配法の組合せによる頭部姿勢と表情の同時推定(メディア処理,画像の認識・理解論文)
- 表情認識のための変動輝度テンプレートとその頭部姿勢変動に対する頑健性の一検討(テーマ関連セッション3)
- 最大マージン原理にもとづく多重トピック文書の自動分類(フィルタリング、文書分類)(テーマ:「Webマイニングによる情報活動と自然言語処理」その他一般)
- 最大マージン原理にもとづく多重トピック文書の自動分類(フィルタリング、文書分類)(テーマ:「Webマイニングによる情報活用と自然言語処理」その他一般)
- モデル検査に基づく知識・信念の推定(「定理証明, 推論関係の新技術」)
- カーネル法 : 基礎と応用(手,顔,身体表現の認識,理解)
- テキスト要約の自動評価(テキストの自動評価)
- 抜粋による複数文書要約を評価するためのコーパスと評価指標
- 生成・識別モデルの統合に基づく半教師あり学習法とその多重分類への応用
- F値最大化学習に基づく文書の多重ラベリング(機械学習)
- 高次元特徴空間に適した半教師あり条件付確率場の検証(機械学習)
- 識別学習による組合せ最適化問題としての文短縮手法
- 単一言語コーパスにおける文の自動対応付け手法(自然言語)
- 階層非循環有向グラフカーネル(情報論的学習理論論文)
- SVMを用いた学習型質問応答システムSAIQA-II(自然言語)
- 単語属性N-gramと統計的機械学習による質問タイプ同定(自然言語)(「インタラクション:理論,技術,応用,評価」)
- 機械学習のための組み合わせ素性の選択基準について(分類、クラスタリング,機械学習)
- 言語パターンに着目した複数文書要約(要約)
- 機械学習のための組み合わせ素性の選択基準について(分類、クラスタリング, 機械学習)(言語理解とコミュニケーション)
- 言語パターンに着目した複数文書要約(言語理解とコミュニケーション)
- 機械学習のための組み合わせ素性の選択基準について
- 言語パターンに着目した複数文書要約
- 素性選択機能をもったString Kernelの提案(パタン発見)(セマンティックウェブと自然言語処理その他一般)
- 素性選択機能をもった String Kernel の提案
- 階層構造を利用したテキスト間類似度の効率的計算法
- LE-10 統計的機械学習を用いた質問タイプ同定(E. 自然言語・文書)
- SAIQA : 大量文書に基づく質問応答システム
- SAIQA : 大量文書に基づく質問応答システム
- 聞き役対話システムの構築を目的とした聞き役対話の分析
- 構文情報に依存しない文短縮手法
- 生成・識別モデルの統合に基づく半教師あり学習法とその多重分類への応用
- 投票型回帰モデルによる要約の自動評価法
- 辞書式順序を持つペナルティによるゼロ代名詞解消(自然言語)
- 拡張ストリングカーネルを用いた要約システムの自動評価法(自然言語,情報処理技術のフロンティア)
- 最大マージン原理に基づく多重ラベリング学習(自然言語処理)
- 文書要約の自動評価手法の提案と評価(セグメンテーション・要約)
- 優先度学習を用いた自然言語処理(解析)
- 生物医学文献からの遺伝子機能フレーズの抽出(抽出,マイニング)
- 環境変動にロバストな物体有無判定法
- 保有知識の確信度に基づく対話型映像認識理解システムの質問生成戦略(テーマセッション,コンピュータビジョンとパターン認識のための機械学習と最適化,一般)
- 保有知識の確信度に基づく対話型映像認識理解システムの質問生成戦略(テーマセッション,コンピュータビジョンとパターン認識のための機械学習と最適化,一般)
- 自然言語処理のためのSVM高速化
- 自然言語処理のためのSVM高速化
- 自動要約評価型ワークショップ : Text Summrization Challenge(TSC)(音声・言語における標準化動向)(第6回音声言語シンポジウム)
- 自動要約評価型ワークショップ : Text Summrization Challenge(TSC)(音声・言語における標準化動向)(第6回音声言語シンポジウム)
- 自動要約評価型ワークショップ : Text Summrization Challenge(TSC)(音声・言語における標準化動向)(第6回音声言語シンポジウム)
- 動向情報の要約と可視化に関するワークショップの提案(検索,要約)
- 動向情報の要約と可視化に関するワークショップの提案(検索,要約)
- 文書要約における抽出単位と評価法についての考察(要約)
- 対話データの統計量を用いたPOMDPによる対話制御(対話,第11回音声言語シンポジウム)
- 対話データの統計量を用いたPOMDPによる対話制御
- まつしゅるーむの世界 : 環境知能の実現
- まっしゅるーむの世界--知能統合の実現に向けて (特集 コミュニケーション環境の未来に向けた研究最前線)
- 環境知能の実現に向けた分野横断型研究の試み : 新しい「環境」における新しい「知」へ(ヒューマンインタラクションとパターン認識・メディア解理・言語理解,ヒューマンインタラクションとパターン認識・メディア解理・言語理解,一般)
- 変動輝度テンプレートによる頭部姿勢と表情の同時推定
- 表情認識のための変動輝度テンプレートとその頭部姿勢変動に対する頑健性の一検討(テーマ関連セッション3,顔・ジェスチャの認識・理解)
- 表情認識のための変動輝度テンプレートとその頭部姿勢変動に対する頑健性の一検討(テーマ関連セッション3,顔・ジェスチャの認識・理解)
- 環境知能のすすめ(オーガナイズドセッション,アンビエント環境知能)
- 環境知能のすすめ(オーガナイズドセッション,アンビエント環境知能)
- 環境知能のすすめ(オーガナイズドセッション)
- カーネル法 : 基礎と応用(手,顔,身体表現の認識,理解)
- カーネル法 : 基礎と応用
- 連載を終えて(これからの情報処理学会)
- LH-003 変動輝度テンプレートを用いた頭部姿勢変動に頑健な確率的表情認識手法(画像認識・メディア理解)
- 阿部圭一(著), 明文術 伝わる日本語の書きかた, NTT出版(株), 189p., 1,890円(税込), ISBN4-7571-0196-1
- 6 バイオ自然言語処理のための機械学習技術(ポストゲノム時代に高まるバイオ自然言語処理への期待 : バイオ自然言語処理最新事情)
- 0 編集にあたって(ポストゲノム時代に高まるバイオ自然言語処理への期待 : バイオ自然言語処理最新事情)
- 音声インタラクティブODQAの構築とその評価
- 質問応答システムの比較と評価
- 固有表現抽出のためのSVMの高速化
- 質問応答システム:SAIQA--何でも答える物知り博士 (特集論文1 高度検索技術)
- E-6 固有表現を利用した大量文書の時系列ブラウジング法(要約・情報検索,E.自然言語・文書)
- 質問に適応した文書要約手法とその評価
- 世界図書館を飲み込む次世代ヒューマノイド--知識処理と言語処理の新しい展開 (特集論文1 人にやさしい対話型コンピュータ)
- AAAI-99参加報告
- 生物医学文献からの遺伝子機能フレーズの抽出(抽出, マイニング)(言語理解とコミュニケーション)
- 音声駆動型QAシステム実現のための言語モデルと対話戦略の検討 (テーマ:一般)
- 4. 論理の逆計算 : 計算機科学の立場から( 逆計算: 計算の理論における逆問題)
- 生物医学文献からの遺伝子機能フレーズの抽出
- セグメント単位の評価指標最大化に基づく条件付確率場の学習
- Support Vector Machineを用いた重要文抽出法(自然言語)
- 機械学習による複数文書からの重要文抽出
- LE-11 機械学習を用いた複数文書要約(E. 自然言語・文書)
- SVMに基づく固有表現抽出の高速化
- メタルールと決定木学習を用いた日本語固有表現抽出(システムLSIの設計技術と設計自動化)
- 固有表現抽出のための可読性の高い規則の自動生成
- 並行実行される固有表現抽出規則の一括生成
- 辞書式優先順位に基づく日本語固有表現抽出
- マルチエージェント環境で他者の信念の変遷を推定する前進的アルゴリズム
- セグメント単位の評価指標最大化に基づく条件付確率場の学習(自然言語処理)
- Order SVM : 一般化順序統計量に基づく順位付け関数の推定(情報論的学習理論論文小特集)
- 大規模データを用いた半教師あり学習による高精度係り受け解析モデルの学習
- LG-5 順序関係を推定する位置づけ学習問題とその解法(G. 人工知能)
- マルチエージェント環境における遡行的信念推定アルゴリズム
- トランザクション論理におけるプログラム変換
- 不均衡データにおける偽陽性率を考慮したスパム判別器のオンライン学習
- D-007 偽陽性率に着目したオンライン学習を用いたスパム判別(Web,D分野:データベース)
- 語順の相関に基づく機械翻訳の自動評価法