2次逆伝播に基づく層別ニュートン法を用いた多層パーセプトロンの学習
スポンサーリンク
概要
- 論文の詳細を見る
本文では,階層型ニューラルネットワークに対して各層別にニュートン法を用いる場合について,収束性の改善を行った手法を提案する.異なる層間の相互影響項を無視した単純な層別ニュートン法は必ずしも良い収束性を示さない.本文では,他の層の荷重修正に伴う1次感度の変化を考慮にいれた改良型の1次感度伝播式および2次感度逆伝播式を誘導する.また,排他的論理和および3ビットパリティ判別問題についてシミュレーションを行い,10回程度の繰り返し学習により,100%正解が得られたことを報告する.
- 社団法人電子情報通信学会の論文
- 1994-06-17
著者
関連論文
- 3ビットパリティ判別に必要な最小中間ユニット数について
- 状態最適化に基づくパーセプトロン逆伝搬学習
- 相互結合型ニュ-ロン回路の逆伝搬学習--動的システム最適化法としての考察
- jwモードをもつLQ制御とH_∞制御の一般解-代数リッカチ方程式の拡張-
- リカレントニューラルネットの学習
- 2次逆伝播に基づく層別ニュートン法を用いた多層パーセプトロンの学習
- LQ最適レギュレータ問題のための高速学習法の考察
- LQおよびLQG学習最適化問題における評価関数の単峰性
- 教師なし学習による倒立振子の非線形制御
- 未知システムの最良近似問題のための適応確率近似法の拡張
- 適応確率近似を用いた学習制御
- 適応確率近似を用いた線形未知確率システムの最適化
- 拡張された適応確率近似を用いたシステムのオンライン最適化
- 非線形逆システムの存在について(回路方程式の研究から) (非線形システム特集号)
- 離散時間最適制御と最適推定について直交条件に関する双対性
- 適応確率近似を用いた学習制御