機械知覚&ロボティクスグループ
中部大学

Vision Applications Deep Learning 口頭発表

Neural Baby Talkによる注意喚起を目的とした運転シーンのキャプション自動生成

Author
森優樹, 福井宏, 平川翼, 西山乘, 山下隆義, 藤吉弘亘
Publication
画像センシングシンポジウム(SSII), 2019

Download: PDF (Japanese)

運転シーンにおけるキャプション生成では,有事の際に搭乗者に危険を促したり,風景から話題を提供するなど,多くの活用が期待されている反面,既存手法では1枚の画像から1つのキャプションのみを生成するなど ,多面的な情報の取得,複数のキャプション生成には適していないモデルが多い.本研究では,キャプション生成に物体検出結果を用いる構造を持つNeural Baby Talk (NBT)を応用し,各検出物体に対するキャプションを生成することで複数のキャプション生成を実現し,任意のテンプレートを用いることで注意喚起に適したキャプションが生成可能であるか確認した.

前の研究 次の研究