f-divergence に関する新しい不等式と最大値および学習問題への応用
スポンサーリンク
概要
- 論文の詳細を見る
確率分布間の距離を測る指標として,情報理論や統計学においてdivergenceが用いられている.Kullback divergenceやvariation distanceなどから一般化したdivergenceのクラスとして,Csiszarはf-divergenceをというものを導入し,f-divergenceと確率分布全体の集合の位相に関する数学的性質を導いた.本論文では,まずf-divergenceとvariation distanceに関する新しい不等式を示し,f-divergenceの最大値に関する結果を示す.そして,その不等式を確率的PAC学習に適用した例も示す.
- 社団法人電子情報通信学会の論文
- 1994-04-25
著者
-
長岡 浩司
電気通信大学大学院情報システム学研究科
-
伊達 惇
北海道大学大学院工学研究科
-
塩谷 浩之
室蘭工業大学工学部
-
長岡 浩司
電気通信大学・大学院情報システム学研究科
-
塩谷 浩之
北海道大学大学院工学研究科
-
伊達 惇
北海道大学
-
伊達 惇
北海道大学大学院工学研究科システム情報工学専攻
関連論文
- 新年を迎えて
- オンデマンドストリーミング映像を用いた学習支援教材システム
- 量子i.i.d.状態における仮説検定の漸近特性に関する数値的アプローチ
- プロセスの特徴を考慮した動的負荷分散についての一考察
- 22pTC-6 電子回折イメージング(領域10シンポジウム主題:X線・電子線による回折イメージングの最前線,領域10,誘電体,格子欠陥,X線・粒子線,フォノン物性)
- 情報論的手法による回折イメージング(機械学習,一般)
- フーリエ反復位相回復法への角度拡がりデコンボリューションの適用(ニューラルネットワーク画像復元及び一般)
- 位相回復におけるアンサンブル手法の利用に関する一検討(ニューラルネットワーク画像復元及び一般)
- 一般化された位相回復アルゴリズムに関する一検討(ニューラルネットワーク画像復元及び一般)
- 複素情報理論の展開 : 物質構造解析への情報論的アプローチ(ニューラルネットワーク画像復元及び一般)
- フーリエ反復位相回復法への角度拡がりデコンボリューションの適用
- 一般化された位相回復アルゴリズムに関する一検討
- 位相回復への情報論的アプローチ(一般, 進化・発進の現象とモデル, 一般)
- ワープロ初心者打鍵情報
- 教師なしアンサンブル学習に関する検討 : 集合知の情報論的モデル化(機械学習,一般)
- 教師無しアンサンブル学習の定式化とその評価
- アンサンブル学習における符号を保つ重み正規化手法に関する検討(研究速報)
- 指数混合による情報表現
- クラスタリングを用いた強化学習システムIPMBNの環境変化への適応について(ニューラルネットワーク画像復元及び一般)
- BN混合モデルを用いたオンライン型方策改善システムの動的環境への適応(ベイジアンネット2 : ポスターセッション)
- ベイジアンネットを利用した強化学習エージェントの方策改善(知識処理)(「インタラクション:理論,技術,応用,評価」)
- 1-105 強化学習エージェントの確率的知識を用いた方策改善法に関する研究
- 順序を持つ矢印の様相論理に基づく信念更新の論理的表現
- 可能性理論における信念更新の定式化
- 再帰型ニューラルネットワークによる蛋白質構造学習と状態空間表現
- Bayesian Networkと情報検索 : 統計的検索とニューラルネット (第10回日本計算機統計学会シンポジウム報告)
- Bayesian Networkと文献検索 : 統計的検索とニューラルネット
- AK-1-2 情報スペクトルを通して見た確率・情報・エントロピー(AK-1.情報スペクトル理論とその周辺,ソサイエティ特別企画,ソサイエティ企画)
- 量子情報幾何の世界(量子情報工学論文)
- 十分統計量と強ユニバーサル情報源符号化
- 量子情報科学の来し方行く末(量子情報科学 : 新しい情報処理のパラダイム)
- 可変長符号化の符号化レートに関する情報スペクトル的考察
- 一般情報源の仮説検定及び情報源固定長符号化での正しい確率の指数
- 情報スペクトル的方法について : 古典および量子情報理論におけるその役割
- 統計的モデルとしてのボルツマンマシン
- 高次ニューロンを用いた確率的ネットワークの特性について
- 量子力学と数理工学
- ボルツマンマシンを用いた天気データのモデリング
- 量子状態推定の漸近理論について
- f-divergence に関する新しい不等式と最大値および学習問題への応用
- ボルツマンマシンにおけるモデル選択について
- ボルツマンマシンの学習と連想記憶
- 混合システム的視点に基づく遺伝的アルゴリズムのモデリング
- 遺伝的アルゴリズムの混合モデル的解析に関する一検討
- 2-414 混合モデルを利用した遺伝的アルゴリズムの解析
- 混合システム的視点に基づく遺伝的アルゴリズムのモデリング
- 学習機械を利用した遺伝的アルゴリズムのモデリングに関する検討
- 拡張遺伝子型分布空間における最適化問題の解析
- 2次元実同次二次変換における発散収束境界の入れ子構造を判別する不変式の導出
- 同次二次変換における発散収束境界の病的形状例に関する考察
- 多重解像度解析を用いたディジタル画像の拡大
- 一般化したファジィ推移的結合問題の一般解
- オブジェクト指向方法論の分散システムへの適応の一考察
- 多重解像度解析を用いた画像の拡大
- ファジィクラスタリングを用いたカラー画像の領域分割
- アンサンブル学習モデルにおける重み付けに関する考察(研究速報)
- 不定性を利用した分布間情報量の拡張に関する一検討
- α-ダイバージェンスを利用した一般化された2乗誤差最小学習
- アンサンブル学習の解析と拡張
- アンサンブル学習の理論的モデル化に関する一検討
- α尤度による損失関数の一般化とその学習
- エスコート分布とα尤度を用いたMLPの学習
- 非ベイズ的付加項を用いた多層パーセプトロンの学習
- MLPの正則化項に関する一検討
- ボルツマン機械の学習と擬距離最小規準
- MLPの正則化項に関する一検討
- 最大エントロピー原理を用いた文献検索システムのBayesian Networkによる実現
- Bayesian Network を用いた情報検索のおける不完全データの学習
- 凸関数の変換とダイバージェンスの関係不等式
- ノイズを含むデータからの学習と連想記憶
- ノイズを含むデータからの学習と連想記憶
- 連想記憶のためのボルツマンマシンの学習の終了条件について
- ボルツマンマシンの学習を用いた連想記憶モデルにおける引き込み領域の大きさについて
- 学習経路と情報量の位相的性質との関係について
- α-情報量を用いたボルツマンマシン型学習法とその連想記憶モデルへの応用
- リフト動作を伴うポインティング操作のユーザモデル
- 2値指数型分布族における自然パラメータに対する高次の統計量の性質
- 2値指数型分布族の期待値パラメータ座標系の諸性質
- 統計的学習と情報量の関係についての考察
- 新年を迎えて
- 推論規則にS-含意およびn-対偶R-含意を用いた分離規則の実現性
- 木構造チャートの機能比較について
- TSSにおけるコマンド名の有効性の評価方法について
- 動的ネットワーク負荷分散における相互優先順位法の効用
- マウスによるポインティング操作のユーザモデルについて
- 堆積型文字データを用いた手書き速記文字識別システム
- ヒューマンインタフェースにおけるユーザの動作計測および解析 (情報工学専攻創立20周年記念号)
- 超音波の位相差を利用したポインティング装置(SPD)の開発
- 超音波の位相差による位置計測とヒューマンインタフェースへの応用
- 両眼視と運動視を応用したビデオシステム
- 慣性機能を持つポインティング装置の開発
- 画像表示システムにおける視覚行動特性利用に関する研究
- ユーザフレンドリなポインティング装置の開発
- 慣性マウスの原理と試作
- 二つの有限集合間の対応づけに関するアルゴリズム : 多重リンク型データ構造の応用
- t-ノルムに基づく種々のファジー論理関数の性質
- ファジィ関係方程式の極小解の集合の性質 (情報工学専攻創立20周年記念号)
- 遺伝的アルゴリズムにおける年齢構造の導入とその収束性
- Lin 情報量の一般化および新しい情報量の導出
- 連続世代モデルにおける年齢構造を持つ遺伝的アルゴリズム