講演抄録/キーワード |
講演名 |
2009-05-25 12:00
感覚情報の能動的低次元化による強化学習 ○小林幹浩(奈良先端大)・内部英治・銅谷賢治(沖縄科学技研基盤整備機構) NC2009-4 |
抄録 |
(和) |
移動ロボットの視覚誘導タスクはロボット分野における基礎タスクの 1 つである.
視覚センサを用いたロボットにおける視覚情報処理の過程とシステムダイナミクスを結合する枠組みに視覚サーボがあるが,
画像特徴量誤差を小さくするよう関節角を制御することを目的としているので
移動ロボットに適用してもロボットの移動は困難である.
本報告では,移動に強化学習を用いた視覚サーボによる視覚誘導タスクの実現方法を提案する.
提案システムは視覚サーボ部と強化学習部で構成され,カメラヘッドを視覚サーボ部により制御し,移動に用いる脚周りの関節を強化学習部により制御する.
また,強化学習を用いるには状態空間や報酬を設定する必要があり,
視覚サーボの情報を用いることで状態空間の大幅な削減が出来るだけでなく,報酬の取得も可能となる.これは視覚サーボ実行後の関節角度が対象物とロボットの相対位置を表現すると考えられるためである.
提案手法を 4 脚ロボット AIBO に適用し,簡単な行動学習実験により有効性を示す. |
(英) |
The goal of this research is to reduce the dimension of the state spaces in the framework of
reinforcement learning using visual servoing.
The adaptive visual servoing minimizes the distance between the current and
desired image measurements by controlling joint angles of the
camera-head mounted on the robot.
The final joint angles of camera-head are regarded as the position of the robot in the environment.
Therefore, the state space can be constructed from the converged
joint angles of the camera head.
On the other hand, the role of reinforcement learning is to drive the robot to the target object in
the environment.
Experimental results show that the efficacy of the proposed method with real robot. |
キーワード |
(和) |
強化学習 / 視覚サーボ / 自律型エージェント / 内部表現 / 低次元化 / / / |
(英) |
reinforcement learning / visual servoing / autonomous agent / internal representation / low-dimensional / / / |
文献情報 |
信学技報, vol. 109, no. 53, NC2009-4, pp. 19-24, 2009年5月. |
資料番号 |
NC2009-4 |
発行日 |
2009-05-18 (NC) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
NC2009-4 |