特異モデルの学習理論(<小特集>情報論的学習理論論文)

スポンサーリンク

概要

• 論文の詳細を見る

• 階層構造, 対称構造, モジュール構造をもつ学習モデルは, 学習モデル全体の作る集合が, 有限次元の多様体と同相ではなく, 特異点をもつために, 総称して特異モデルと呼ばれている.特異モデルは, 情報システムの構築において広く用いられているが, その設計の基礎として必要となる数学的な性質には, いまだに不明なことが多く残されている.この論文では, 最ゆう推定法, 学習の力学系, ベイズ推定法の三つの観点から, これまでに解明されている理論的な結果についてのサーベイを行う.

• 社団法人電子情報通信学会の論文
• 2005-02-01

著者

• 福水 健次

  情報・システム研究機構統計数理研究所・総合研究大学院大学

• 福水 健次

  統計数理研究所

• 福水 健次

  情報・システム研究機構統計数理研究所

• 福水 健次

  (株)リコー研究開発本部

• 渡辺 澄夫

  東京工業大学精密工学研究所

• 萩原 克幸

  三重大学教育学部

• 甘利 俊一

  理化学研究所脳科学総合研究センター

• 甘利 俊一

  理化学研究所

• 渡辺 澄夫

  東京工業大学

• 萩原 克幸

  名工大

関連論文

• 神経回路網と幾何学の接点(神経システムと代数幾何) (離散力学系の分子細胞生物学への応用数理)
• 重み付きブローアップの混合多項分布への応用(情報理論)
• On the relation between asymptotic learning curve and renormalizability in learning theory (ニューロコンピューティング)
• 学習理論における極限定理と特異ゆらぎの関係について
• MCMCサンプルを中心に持つ混合正規分布の最適化による確率的複雑さの計算法
• 多値判別における2値判別機のゲーム理論的組合せ法(人工知能,認知科学)
• 交換モンテカルロ法における熱浴型交換率の解析
• 再生核ヒルベルト空間を用いた統計的推論 (再生核の応用についての研究)
• IT野ニューロン集団の時間相関を取り入れたクラスタリング
• 29pXH-7 側頭葉の顔応答ニューロンの混合正規分布解析(29pXH ニューラルネットワーク(神経系のモデルを含む),領域11(統計力学,物性基礎論,応用数学,力学,流体物理))
• 混合 von Mises-Fisher 分布の変分ベイズ推定について
• 特異モデルの学習理論(情報論的学習理論論文)
• 正定値カーネルによる回帰問題における次元削減法 (特集 計算推論--モデリング・数理・アルゴリズム)
• ニューロ多様体の特異構造と無限の局所自由度 (最新 脳の数学理論--脳を語る情報と幾何の最前線)
• 特異モデルにおける統計的推測 : 接錐によるアプローチ
• [チュートリアル講演]特異モデルにおける統計的推測(統計的学習理論及び一般)
• 多項式近似における学習データの最適設計と予測誤差
• 縮退したFisher情報行列を持つ系の学習について
• 多層パーセプトロンのFisher情報行列の正定値性について
• ニューラルネットワークの推定誤差の解析と学習データ最適化手法
• 独立でないデータによる隠れマルコフモデルの構造推定(確率モデル,統計,学習,神経ダイナミクス,一般)
• Pade近似による学習理論のゼータ関数の極の推定
• 特異モデルにおけるマルコフ連鎖モンテカルロ法の評価法(パターン認識)
• 特異モデルにおけるモデル選択法の提案
• 隠れマルコフモデルの学習係数について
• ベイズ事後分布実現における平均場近似の精度評価
• 階層型ベイジアンネットワークの確率的複雑さと特異点(ベイジアンネット2 : ポスターセッション)
• 特異的な学習モデルにおけるメトロポリス法の挙動について
• カルバック情報量の分割による特異モデルの確率的複雑さの計算法
• 特異モデルにおけるMCMC法の計算精度について(一般)(ニューロインフォーマティックスとは何か)
• 形式的情報量規準による決定株を用いたAdaBoostのモデル選択(バイオサイバネティックス,ニューロコンピューティング)
• 統計的推測の状態方程式に関する実験的検討
• 情報量規準を用いたAdaBoostのモデル選択の検討
• 特異モデルにおけるMCMC法の計算精度について
• ベイジアンネットワークの確率的複雑さと代数幾何(統計的学習理論及び一般)
• 縮小ランク回帰モデルのベイズ汎化誤差について
• NCCCPに基づくCDMAマルチユーザ復調アルゴリズム
• 混合正規分布におけるベイズ周辺尤度の厳密計算法 (ニューロコンピューティング)
• 特異モデルにおけるベイズ検定と時系列解析への応用(アルゴリズム理論)
• 特異モデルにおけるベイズ検定と時系列解析への応用(ベイズ情報処理,ベイズ情報処理及び一般)
• 物理学者でない人にとって平衡統計力学とは
• 学習理論の基礎概念
• 研究詳解 正定値カーネルによるノンパラメトリック推論 (特集「統計的機械学習」)
• 自己組織化写像の汎化誤差について(機械学習,生物模倣情報処理,機械学習,一般)
• 学習理論における漸近挙動と繰り込み可能性との関係について
• 特異点解消とニューラルネットワークのベイズ推定における汎化誤差(バイオサイバネティックス, ニューロコンピューティング)
• 混合正規分布の特異点の非解析性について(学習理論)
• ニュートン図形を用いた確率的複雑さの解析法(学習理論)
• 縮小ランクモデルの汎化誤差と特異点解消(学習理論)
• [チュートリアル講演]特異点解消と学習理論への応用(統計的学習理論及び一般)
• 代数幾何と学習理論への入門と新展開(特別セッション,機械学習とその応用)
• 混合正規分布におけるべイズ周辺尤度の厳密計算法(機械学習,生物模倣情報処理,機械学習,一般)
• 混合正規分布の隠れ変数上のMCMC法の提案とベイズ周辺尤度への応用(テーマセッション,コンピュータビジョンとパターン認識のための機械学習と最適化,一般)
• 混合正規分布の隠れ変数上のMCMC法の提案とべイズ周辺尤度への応用(テーマセッション,コンピュータビジョンとパターン認識のための機械学習と最適化,一般)
• 変分ベイズ法におけるクロスヴァリデーションと汎化誤差の分散について(テーマセッション,コンピュータビジョンとパターン認識のための機械学習と最適化,一般)
• 変分べイズ法におけるクロスヴァリデーションと汎化誤差の分散について(テーマセッション,コンピュータビジョンとパターン認識のための機械学習と最適化,一般)
• カーネル法による因果ネットワークの学習(非線形科学と統計科学の対話,研究会報告)
• ニューラルネットワークを利用した能動的な視覚系の制御
• 独立成分解析に基づく画像情報量の抽出法
• 混合正規分布におけるベイズ法と変分ベイズ法の相違について(IBIS2010(情報論的学習理論ワークショップ))
• 遺伝的アルゴリズムによる超音波イメージング系のシステム特性の同定
• 混合ベルヌーイ分布による変分ベイズ学習の相転移構造(IBIS2010(情報論的学習理論ワークショップ))
• 3.ニューラルネットワークの能動学習 (能動学習)
• 線形逆問題における階層変分ベイズ法の解析
• 多層ニューラルネットワークの特殊な統計的性質
• 隠れマルコフモデルの変分ベイズ学習における確率的複雑さについて(パターン認識)
• 確率文脈自由文法の変分ベイズ推定における確率的複雑さについて(一般, 脳・ヒューマンモデリング, 一般)
• 隠れマルコフモデルの変分ベイズ推定における確率的複雑さについて
• 局所化ベイズ学習法(アルゴリズム理論)
• 線形神経回路網における部分空間ベイズ法の解析 : ベイズ的推定法と縮小推定との関係(一般, 脳・ヒューマンモデリング, 一般)
• 縮小ランク回帰における変分ベイズ法の汎化誤差について
• 縮小ランク回帰における変分ベイズ法の汎化誤差について
• ハイパーパラメータ最適化法における汎化誤差について : 経験ベイズ法と特異点を持つ階層モデルとの類似(学習理論)
• 隠れマルコフモデルによる混合動作の認識
• 特異的なモデルにおける局所化ベイズ学習法
• ランジュバン方程式を用いたベイズ学習の特異モデルにおける挙動について(確率モデル,統計,学習,神経ダイナミクス,一般)
• 完全2部グラフ型ボルツマンマシンの代数幾何
• 完全2部グラフ型ボルツマンマシンの代数幾何
• 混合分布モデルにおける確率的複雑さの解明
• 特異点をもつ推論モデルの学習曲線の確率的計算法
• 特異点を持つ推論モデルの確率的学習精度計算アルゴリズム
• 非定常時系列予測のための学習データの選択法
• 一次データを保存しない大規模科学計算の可能性
• 情報量の測り方による近似事後分布の性質の相違について
• 混合指数型分布の変分ベイズ学習における確率的複雑さ
• ベーテ自由エネルギーに対するCCCPアルゴリズムの拡張
• 25pPSB-4 菊池自由エネルギーに対するCCCPアルゴリズムの拡張(ポスターセッション,領域11,統計力学,物性基礎論,応用数学,力学,流体物理)
• 正規分布におけるベーテ近似の解析解と数値解(機械学習,一般)
• ガウシアン確率伝搬の近似精度に対する理論解析(生体信号の計測と解析,一般)
• 完全2部グラフ型ボルツマンマシンの平均場近似による確率的複雑さについて(情報理論)
• 一般ボルツマンマシンにおける平均場近似自由エネルギーの漸近的挙動
• 完全2部グラフ型ボルツマンマシンにおける平均場近似自由エネルギーの漸近的挙動
• 28aPS-86 分子動力学データに対する統計解析(28aPS ポスターセッション,領域11(統計力学,物性基礎論,応用数学,力学,流体物理))
• 最適化問題を解くホップフィールドモデルの設計法
• 23aGN-5 生体分子の分子動力学時系列データに対する統計解析(23aGN 生物物理,領域12(ソフトマター物理,化学物理,生物物理))
• Kernel and Feature Search in Kernel PCA (情報論的学習理論と機械学習)
• Kernel and Feature Search in Kernel PCA
• 部分観測マルコフ決定過程ベルマン方程式のカーネル化(強化学習,統計推理,データベース,一般)
• 代謝フラックスと凸多面体 (第9回生物数学の理論とその応用)
• Classes of translation-invariant kernels on compact groups

もっと見る 閉じる

スポンサーリンク