Deep Learning
口頭発表
UNREAL における補助タスクの適応的選択
- Author
- 板谷英典, 平川翼, 山下隆義, 藤吉弘亘
- Publication
- 人工知能学会全国大会, 2019
Download: PDF (Japanese)
深層強化学習において，複雑な問題を解くことは状態空間が膨大であるため非常に困難である． 深層強化学習法の一つであるUNspervised REinfrocsment learning and Auxiliary Learning(UNREAL)は異なる複数の補助タスクを学習時に導入することにより，ゲームタスクにおいて高いスコアを達成している．しかし，UNREALで用いられている全ての補助タスクは，あらゆる問題設定において必ずしも有効であるとは限らない．そのため，補助タスクの設計に環境に合うタスクを設計する必要があるが，問題に合わせて逐次設計することは多大な手間と時間を要する．本研究では，補助タスクを環境に合わせ適応的に選択するタスクAuxiliary SelectionをUNREALに導入することで，効率的に学習する手法を提案する．DeepMind Labを用いた実験により，効率的に学習できることを示す．