複素バックプロパゲーション学習アルゴリズムの学習特性
スポンサーリンク
概要
- 論文の詳細を見る
複素パターンに対する学習アルゴリズムとして提案された複素BPは,その学習パラメータがすべて複素数となっており,実数値を用いる通常のパックプロパゲーション学習アルゴリズム(BP)を複素数に拡張したものである.本稿では,複素BPの学習特性を調べた結果,次の特性が明らかになったので報告する.(i)複素BPにおける誤差逆伝播は2次元運動に基づいた構造を有している.(ii)複素BPは,ネットワークを流れる複素信号を1つの処理単位として学習を進めるものである.(iii)複素BPでは,学習則における実部要因と虚部要因の補完構造により,学習停滞状態の発生が押えられる.その結果,通常のBPに比べて,複素パターンに対する学習が数倍速くなっている.しかも,そのときに必要となる学習パラメータ数は約半分で済む.これらの意昧で,複素BPは複素パターンの学習に適したアルゴリズムであると言える.また,これらの諸特性は意図されたものではなく,ニューラルネットワークに複素数という数学的構造を導入したことにより自ずと現れてきたものである.複素BPの基本特性ビ関しては,重みパラメータの2次元運動構造,決定表面の直交性および2次元運動学習能力(図形変換能力)などが既に報告されている.これらは主としてネットワークアーキテクチャからのアプローチにより得られた結果であるのに対し,本稿の結果は学習アルゴリズムの観点から得られたものである.
- 一般社団法人情報処理学会の論文
- 1993-01-15
著者
-
古谷 立美
電子技術総合研究所電子計算機部計算機方式研究室
-
新田 徹
電子技術総合研究所
-
古谷 立美
電子技術総合研究所情報アーキテクチャ部計算機構研究室
-
古谷 立美
電子技術総合研究所
-
新田 徹
電総研
関連論文
- ニューラルネットワークによる情動・記憶モデルの構成
- 並列構造記述モデルとそれを実現する高水準並列計算機
- 海馬の三次元神経回路による連想記憶モデル
- 3S-1 'neuron-oid'系における創発的情報処理(第3報) : 'neuron-oid'での入力間の同期検出
- 感情記憶システムの構想
- アナログニューラルネットによる最適化問題の効率的な解法
- ホップフィールド型ニューラルネットのコスト係数の制御
- ホップフィールド型ニューラルネットによる最適化問題の効率的な解法
- "進化するハードウェア"による有限オートマトンの学習
- ホップフィールド型ニューラルネットワークにおけるコスト係数の制御
- フィードバック付き多層ニューラルネットワーク
- しきい値動的制御法による巡回セールスマン問題の解法
- フィードバック付き多層ニューラルネットワーク
- 並列連想プロセッサIXM2
- 意味記憶システムIX : 意味ネットマシンIXM2によるword disambiguationの実験
- 複素バックプロパゲーション学習アルゴリズムの学習特性
- 複素バックプロパゲーション・ネットワークにおける重みパラメータと決定表面の構造
- 非負値生産関数を持つ資源配分モデルの解析
- 複素バックプロパゲーション学習
- 入出力関数の傾きとバイアス値の動的な調整による局所安定点回避効果
- 複素バックプロパゲーション学習
- シミュレーテッドアニーリング法を用いたRNA二次構造予測
- メモリネットワーク : 大規模ニューラルネットワークのハードウェア化法
- μBRAIN : コネクショニストAIシステム : 状態ユニットを持ったニューラルネットワークによる時系列情報の処理
- NFS : ニューラルネットワークを用いたファジィ推論システム
- ニューラルネットワークを実現するメモリネットワーク
- μBRAIN : 知能体実現のための構造化ニューラルネットワーク
- NFS : ニューラルネットワークを用いたファジィ推論システム
- バックプロパゲーションアルゴリズムの学習能力
- 応用指向メモリ (メモリ)
- マイクロプロセッサ(PULCE)におけるマイクロ命令の静的使用特性
- モジュール型複合計算機 (ACE) の試み(分散処理)
- マイクロプロセッサア-キテクチャの一設計
- ETL[電子技術総合研究所]マイクロ処理ユニットのア-キテクチャ (マイクロコンピュ-タ)
- C.mmp マルチ・ミニ・プロセッサについて
- マルチプロセッサシステム用相互排斥モジュールの一設計
- クラシファイヤシステムの引き込み(汎化)能力と二倍体モデルの適用について
- 意味記憶システムIX : 要素プロセッサ間結合方式のシミュレーション
- 意味記憶システムIX : 意味ネットワークのIXMマシンへの割り付け
- 高度並列計算機方式とその画象処理への適用性
- 米の品質判定用ニュ-ロプロセッサの開発に関する研究-1-ニュ-ラルネットワ-クによる米の品質判定
- 3. アーキテクチャ 3.6 意味ネットワークマシン (並列処理マシン)
- 機能メモリのアーキテクチャとその並列計算への応用 7. 人工知能への応用
- IXMにおける連想メモリ上の並列演算性能
- ニューラルネットワークの3次元への拡張
- 回転を学習した複素 BP ネットワークのふるまい
- 複素ニューラルネットワーク
- 脳と意識に関するTokyo'99国際会議
- 相互結合型ニューラルネットにおける支援因子の取るべき値の範囲について
- ポリプロセッサ・シミュレーション・システム : PPSS
- 73-27 ARPA ネットワークのための新しいミニコンピュータ/マルチプロセッサ
- マイクロプロセッサ(PULCE)を用いたConcurrent Pascalマシン
- 高級言語による並列処理の記述
- マルチプロセッサシステムにおけるConcurrent Pascalマシン
- バス結合マルチプロセッサシステムの解析モデルと解析
- クリフォード代数の応用 : サーベイ