量子化結合非単調ニューラルネットワークのハードウェア化設計とその閾値学習アルゴリズム
スポンサーリンク
概要
- 論文の詳細を見る
ニューラルネットワークの持つ高度な情報処理能力を実現するためにはハードウェア化が必須であり、高速かつ集積度の高いハードウェアが要求される。これらの要求を満たすために、我々は荷重値の量子化と非単調ニューロンの導入という2つの手法を取り入れた。荷重値の量子化は{-1,0,+1}の3値のみを考える。これにより集積度は向上するが学習性能の低下は避けられない。この学習性能の低下を補うために、学習性能の高い非単調ニューロンを導入する。非単調ニューロンには閾値と呼ばれるパラメータが存在し学習性能はその値に左右され、その最適値は解く問題やネットワーク構造に依存する。そこで本論文では閾値の学習アルゴリズムを提案し、数値シミュレーションによりその有効性を示す。さらに、このような量子化結合非単調ニューラルネットワークをアナログ回路で設計し、学習回路を含む20ニューロン400シナプスのシステムを設計した。
- 2002-11-04
著者
-
中島 康治
東北大学 電気通信研究所
-
佐藤 茂雄
東北大学 電気通信研究所
-
金城 光永
琉球大学
-
石田 文彦
電気通信大学
-
石田 文彦
電気通信大学 大学院 情報システム学研究科
-
芳賀 琢哉
東北大学 電気通信研究所 中島研究室
-
金城 光永
東北大学 電気通信研究所 中島研究室
-
金城 光永
琉球大学工学部
関連論文
- ホップフィールドネットワークと断熱的量子計算
- A-2-35 ニューラルネットワークの手法を用いた断熱的量子計算における計算性能のハミルトニアン依存性について(A-2.非線形問題,一般セッション)
- ニューラルネットワークの手法を用いた断熱的量子計算における計算能力に関する考察
- 手操作運動に関わるサルAIP野神経活動の情報量解析
- 視覚運動変換に関わる神経活動の情報量解析 (電気通信大学 IS(大学院情報システム学研究科)シンポジウム 第15回「Sensing and Perception」)
- 手操作運動課題におけるサルAIP野ニューロンの情報量解析(スパイク信号の統計解析、一般)
- 単一ニューロンのスパイク統計解析 (電気通信大学 IS(大学院情報システム学研究科)シンポジウム 第14回「Sensing and Perception」)
- 手操作運動中のサルF5-AIP野神経活動の情報量解析(BCI/BMIとその周辺,一般)
- 抵抗接地位相モード論理回路の集積化
- CT-1-2 固有ジョセフソン接合の量子特性(CT-1.超伝導量子コンピュータ研究の最前線,チュートリアルセッション,ソサイエティ企画)
- 19aRD-6 Bi-2212固有ジョセフソン接合列における多重スイッチング特性(超伝導(近接効果),領域6,金属,超低温,超伝導・密度波)
- CS-6-7 Bi-2212固有ジョセフソン接合の量子特性について(CS-6.量子ビットの現在、量子コンピューティングの将来,シンポジウム)
- Bi2212固有ジョセフソン接合における巨視的量子トンネル(電子デバイス, 一般)
- 21aWE-1 「先行制御」とリズムの自己生成の必要性(21aWE 生物物理,領域12(ソフトマター物理,化学物理,生物物理))
- A-2-12 van der Pol相互結合系のポテンシャルとアクティブエリアに基づく動解析(A-2.非線形問題,一般セッション)
- A-2-1 高次結合ネットワークによる組み合わせ最適化問題解探査のパラメータ特性(A-2.非線形問題,一般セッション)
- A-15-25 手動追従運動に対するターゲット弁別容易度の影響(A-15. ヒューマン情報処理)
- 人の感覚運動システムにおける先行位相の定量的研究
- ニューラルネットワークにおけるアトラクティブフィールドの学習に関する研究
- 11項 ブレイン機能集積工学研究会(3節 工学研究会,第5章 国際会議・シンポジウム等)
- A-2-9 バースト発火IDニューロンモデルの最適化問題への適用(A-2.非線形問題,一般講演)
- 11項 ブレイン機能集積工学研究会(3節 工学研究会,第5章 国際会議・シンポジウム等)
- 2次ポテンシャル上にアクティブエリアを持つ振動子相互結合系の振る舞い
- 離散時間高次結合逆関数遅延ネットワーク
- 超伝導ニューラルネットワークとその4-Queen問題への応用
- C-8-18 大規模集積回路のためのSFQ Booth Encoder(C-8.超伝導エレクトロニクス,一般セッション)
- C-8-6 磁束量子高速乗算回路
- 神経ネットワークにおける多細胞同時記録とその解析
- Si中のP原子核スピン配列に基づくニューロ様断熱的量子計算について(ナノ機能性1,機能ナノデバイス及び関連技術)
- Si中のP原子核スピン配列に基づくニューロ様断熱的量子計算について(ナノ機能性1,機能ナノデバイス及び関連技術)
- ニューラルネットワークの手法を用いた断熱的量子計算における計算能力に関する考察
- 量子ニューラルネットワークの学習アルゴリズムに関する考察(「機械学習によるバイオデータマインニング」及び「一般」)
- 4次形式のエネルギー関数に基づく組み合わせ最適化問題解探査法 : より大規模な問題への適用を目指して
- 11項 ブレイン機能集積工学研究会(3節 工学研究会,第5章 国際会議・シンポジウム等)
- ストカスティックロジックによる逆関数遅延ニューロの設計
- D-2-4 ストカスティックロジックニューロンを用いた画像復元への応用(D-2. ニューロコンピューティング)
- アクティブエリアをもつポテンシャルの時空間パターンに基づくバーストダイナミクスの振る舞い
- 打撃動作における関節スティフネスの能動的な調節
- 技能獲得過程の計算モデル
- 強化学習型タスクにおける人間の行動決定に関する研究 (電気通信大学 IS(大学院情報システム学研究科)シンポジウム 第12回「Sensing and Perception」)
- 学習曲線の時間変化に着目した自己組織的強化学習アルゴリズム(2)
- アナログ連想メモリの集積化
- パルス型神経細胞モデルに基づくsignal dependent noise生成機構の検討(バイオサイバネティックス,ニューロコンピューティング)
- 生体ノイズ特性に基づく終点分散最小規範の再検討(バイオサイバネティックス,ニューロコンピューティング)
- C-12-30 多入力多数決回路の集積化とその応用
- 量子化結合非単調ニューラルネットワークのハードウェア化設計とその閾値学習アルゴリズム
- 非単調ニューロンにより構成されたボルツマンマシンの統計力学的性質
- 量子化結合ニューラルネットワークの学習とその集積回路による実現
- ストカスティックニューロシステムにおける非線形ダイナミクス
- 量子化シナプスを用いたDBMの学習能力について
- 高温超伝導体における巨視的量子トンネリング
- パルス型細胞モデルに基づくsignal dependent noise発生機構の検討
- A-2-28 ストカスティックロジックによるリミットサイクル間の遷移に関する研究
- D-2-10 非単調ニューロンを用いた大規模ストカスティックニューロシステム
- ディジタルストカスティック非単調ニューロチップ
- D-2-1 非単調ニューロンを用いたディジタルストカスティックニューロチップの実現
- ストカスティックニューロシステムの集積化
- C-12-83 SDAMを用いた集積化連想記憶システム
- 量子ダイナミクス導入によるニューロチップの高性能化に関する考察
- C-8-5 各種並列加算アルゴリズムによるSFQ CLAの性能比較(C-8.超伝導エレクトロニクス,一般セッション)
- A-2-33 相互結合バーストニューロンの同期振動と静止現象(A-2.非線形問題,一般セッション)
- A-2-17 相互結合系におけるvan der Pol振動子の電子回路上の振る舞い(A-2.非線形問題,一般セッション)
- A-2-11 IDモデルを用いたN-Queen問題の静的解探査に対する不応期の導入(A-2.非線形問題,一般セッション)
- Kaneの量子ビットを用いた量子ニューラルネットワークの基本特性の検証
- 予測と行為 : 主体的行為はいかにして可能か
- 人の感覚運動系における先行制御
- 視覚目標追従時の手の先行運動
- シンポルダイナミクスの学習によるパターンダイナミクスの記憶
- 環状結合型ニューラルネットーワークへのカオス系列の影響
- マップカオスを用いたカオス発生回路の設計
- ストカスティック論理による高次結合ニューラルネットワーク
- ストカスティックロジックを用いた1000ニューロンハードウェアシステムの構築及びその応用(NC企画セッション : ニューロハードウェア)
- ストカスティックロジックを用いた1000ニューロンハードウェアシステムの構築及びその応用(企画セッション : ニューロハードウェア)
- 9.量子ニューラルネットワーク実現への試み : 量子ビットをニューロンとして使うために(応用分野が広がる複素ニューラルネットワーク)
- SA-2-4 ストカスティックロジックを用いた大規模ハードウェアニューラルネットワークシステムの実現(SA-2. カオスとノイズと工学)
- SC-11-5 確率的演算動作によるニューロシステムの実装とその単電子デバイス回路への拡張(SC-11.新概念VLSI : 先進アーキテクチャ,新回路,デバイス技術)
- 確率的ニューロモデルによる1000ニューロンハードウェアシステムの構築とその応用
- SA-2-4 ニューロ的手法を導入した量子計算アルゴリズムに関する考察
- 断熱的変化を利用した量子計算アルゴリズムに関する考察
- 量子化結合非単調ニューラルネットワークにおけるWeight Flip Algorithm
- 量子化結合非単調ニューラルネットワークとそのハードウェア化
- D-2-2 量子化結合ニューラルネットワークにおける非単調ニューロンの効果
- D-2-9 単調及び非単調ニューロンネットワークの学習性能比較について
- DBM学習を行う非単調ニューラルネットワークの集積化について
- 非単調ニューロンを用いたDBMの学習に関する考察
- 非単調ニューロンを用いたDBMの学習に関する考察
- 非単調ニューロンを用いたDBMの学習性能に関する考察
- A-2-34 量子化結合ニューラルネットワークの構成
- 人の感覚運動システムにおける先行制御 (電気通信大学 IS(大学院情報システム学研究科)シンポジウム 第10回「Sensing and Perception」)
- 4次形式のエネルギー関数に基づく組み合わせ最適化問題解探査法 : より大規模な問題への適用を目指して
- 高次結合ネットワークによる最適化問題解探索の為のエネルギー関数設計法 (非線形問題)
- 量子ニューロコンピューティングとその応用 (特集 コンピューテーショナル・インテリジェンスの新展開 : クリフォード代数表現など高次元表現を中心として)
- D-2-2 ストカスティックロジックを用いた非単調ニューラルネットワークの構成
- D-2-9 学位論文審査会スケジューリング問題とその解探査システム(D-2.ニューロコンピューティング,一般セッション)
- C-8-1 ジョセフソン接合列の集団的な力学特性(C-8.超伝導エレクトロニクス,一般セッション)
- 量子ニューロコンピューティングとその応用
- 高次結合ネットワークによる最適化問題解探索の為のエネルギー関数設計法
- C-10-10 量子ビットデバイスに基づくNAQCにおける最終Hamiltonian構成法の検討(C-10. 電子デバイス,一般セッション)
- A-1-12 Verilog HDLを用いた万能量子論理ゲートのエミュレータ回路設計に関する考察(A-1.回路とシステム,一般セッション)
- A-2-5 Hamiltonianの性質に基づく断熱的量子計算エミュレータ実現に向けた計算手法の検討(A-2.非線形問題,一般セッション)