手の動きを入力としたリアルタイム音声生成系における鼻音の合成とピッチ制御に関する検討(福祉と音声処理,一般)

概要

論文の詳細を見る
発声器官の制御に障害を持つ構音障害者が会話をする場合、文字や記号の入力を介して音声を生成する機器を用いることが多い。しかし、リアルタイムに自由な発話をすることが難しく、障害者が会話の主導権を握れない等の問題が指摘されている。そこで本研究では、文字や記号を介さない音声生成として、障害者自身の構音器官以外の身体運動から直接音声を生成するシステムの構築を検討している。近年、与えられたパラレルデータに対して、統計的に空間写像を設計する手法が話者変換の分野で用いられている。この手法を応用し、本研究では、身体運動の特徴量空間から音声の特徴量空間への写像に基づく音声生成系を検討している。これまでに、手姿勢(ジェスチャー)を入力とした日本語五母音の連続音声生成において、本手法が有効であることを報告した。さらに自由な発話の実現を目指し、本稿では本システムにおける鼻子音の合成とピッチ制御に関して実験的検討を行った。本システムへの子音の導入方法としては、子音の開始時刻を前腕の姿勢角などで指定し、子音の波形と、ジェスチャーから得られる母音波形を接続する方式や、母音に対して用いた提案手法を子音の合成に拡張する方式などが考えられる。本稿では子音としてまず鼻音に注目し、この2通りの合成方法について実験的検討を行った。また磁気センサを導入し、前腕の姿勢角によるピッチ制御を実現したので報告する。
社団法人電子情報通信学会の論文
2009-10-22

手の動きを入力としたリアルタイム音声生成系における鼻音の合成とピッチ制御に関する検討(福祉と音声処理,一般)

スポンサーリンク

概要

著者

関連論文

スポンサーリンク