画像情報と音声情報からの概念と文法の獲得

スポンサーリンク

概要

論文の詳細を見る
人間はいくつかの感覚器を通して外部の刺激を受け、その情報が脳に伝えられ様々な概念を獲得していると考えられる。特に、視覚と聴覚の刺激が概念の獲得に重要な役割を果たしていると考えられる。そこで、我々は初期知識を持たない状態から、入力の音声と画像より概念と文法を獲得するシステムを開発している。システムには図形に関する画像とそれに対応する音声が入力され、システムは獲得されている概念とその入力の情報を比較することで概念を獲得していく。また、システムは獲得された概念を用いて入力音声に現れる概念のシーケンスを検知し、これらのシーケンスをHMMでモデル化することで文法を獲得する。更に、システムは獲得した概念と文法を利用して入力の画像に対する文を生成する。本稿ではこのシステムの構成と動作について紹介する。
一般社団法人情報処理学会の論文
1994-03-07

著者

関連論文

もっと見る

スポンサーリンク