身体と環境の特性を利用した状態-行動空間の抽象化 : 強化学習を用いた自律ヘビ型ロボットへの適用
スポンサーリンク
概要
- 論文の詳細を見る
本論文では，強化学習を用いたヘビ型ロボットの制御について考え，その際に発生する，「学習時間の長さの問題」および，「汎化能力の欠如の問題」の二つの問題を解決することを目的とする．これらの問題を解決するため，ロボットの身体および環境の性質に注目し，身体と環境との相互作用によって，状態・行動空間を実時間に抽象化する枠組みを提案する．この抽象化によって，探索空間の大きさを実学習が可能な大きさまで縮退させるとともに，学習器に汎化能力を付加する．提案手法の有用性を確認するため，実際にロボットを製作するとともに，製作した実機を用いて学習を行った．その結果，50試行程度の少ない試行回数で学習が完了するとともに，獲得された政策は，異なる環境に対しても再学習を行うことなく適用可能であった．これにより，「学習時間の長さの問題」および，「汎化能力の欠如の問題」の二つの問題が提案手法によって解決されていることが確認された．
- 2009-06-15
著者
関連論文
- 身体と環境の特性を利用した状態-行動空間の抽象化 : 強化学習を用いた自律ヘビ型ロボットへの適用
- サービスロボットへの指令における不完全性の対話による補完手法
- 非熟練オペレータ用情報収集ロボット : サーモグラフィを用いた視覚支援システムの開発
- 1P1-S-092 非熟練オペレータ用情報収集ロボット : サーモグラフィを用いた視覚支援システムの開発(レスキューシステム・レスキュー工学2,生活を支援するロボメカ技術のメガインテグレーション)
- 強化学習による冗長ロボットの自律制御に関する研究 : 身体像を考慮した強化学習
- 2A1-3F-B4 環境モデルの利用による強化学習の効率化 : 経験の共有による環境モデルの構築
- 1A1-56-078 強化学習による超冗長系の制御
- 2214 サービスロボットのための対話モデル
- 知覚量に基づく制御系設計 : 蛇型ロボットの方向の知覚量を用いたフィードバック制御
- 超冗長系の状態空間分割による学習の効率化
- 設計意図と図形を関連づけたCAD(機械要素,潤滑,工作,生産管理など)
- 対象物に添付した知能デバイスからの情報を利用したロボット動作の支援手法(NP5 知能化・IT化技術)
- 操作性を考慮した情報収集ロボット : システムの設計概念とシステム構成の提案(レスキューシステム・レスキュー工学1)
- 3405 設計意図を図形と関連づけた CAD の開発
- GAにより探索空間の動的生成を行うQ学習による実多自由度ロボットの制御 : 階層構造の拡張と蛇型ロボットへの適用
- 2P1-2F-F2 バッティングロボットに関する研究 : トスバッティングの実現
- QDSEGAによる多足ロボットの歩行運動の獲得
- GAにより探索空間の動的生成を行うQ学習
- Keeping of Flock Behavior by Using Time to Contact Called Tau-Margin (Application to Multi Mobile Robots That Have a Light Bulb)