3次元MRI動画データと実音声を用いた声道断面積モデルのパラメータ推定
スポンサーリンク
概要
- 論文の詳細を見る
3次元MRI動画と音声を用いて高品質な合成音声の生成を可能にする声道断面積モデルのパラメータ推定手法の提案を行う。始めに,複数話者のMR画像より計測された声道断面積関数を用いて,複数の話者,複数の音素の声道断面積関数を表現できる声道断面積モデルを構築する。次に,単語発声時の3次元MRI動画の声道形状から作成した声道断面積モデルを初期値として,モデルから計算された伝達関数が同じ単語を発声した時の音声のスペクトル包絡と一致するようにシミュレーテッドアニーリングを用いてパラメータの補正を行う。複数の単語に対してパラメータの推定実験を行い,合成音声と実音声とを比較することにより本方式の有効性を確認した。
- 社団法人日本音響学会の論文
- 2008-04-01
著者
-
党 建武
北陸先端科学技術大学院大学情報科学研究科
-
党 建武
北陸先端科学技術大学院大学
-
本多 清志
Atr人間情報通信研究所
-
平井 啓之
(株)エーアイ
-
竹本 浩典
ATR認知情報科学研究所
-
本多 清志
LPP, CNRS-U.Paris3
-
平井 啓之
(株)エーアイ:北陸先端科学技術大学院大学情報科学研究科
-
平井 啓之
三洋電機ハイパーメディア研究所
-
竹本 浩典
情報通信研究機構ユニバーサルメディア研究センター
関連論文
- 高効率エネルギー放射を意図したアンプの研究開発(学生研究発表会)
- D-14-1 素片編集型音声合成における発話スタイルに関する研究(D-14. 音声,一般セッション)
- IECを用いた素片接続コストの重み係数推定
- 声帯振動に伴う喉頭腔共鳴の周期性(音声・聴覚,一般)
- 声帯振動に伴う喉頭腔共鳴の周期性
- 母音発声時の音声スペクトルに対する歯列間隙の影響
- GMMに基づいた雑音感度関数を用いたロバスト音声認識(聴覚・音声及び一般)
- MRIによる歯列計測法 : 熱可塑性エラストマー製マウスピースを用いて(頭部)
- 光マイクロホンを用いたMRI撮像時の騒音測定
- 座位および仰臥位における声道形状の相違 : 開放型MRI装置を用いた観測(生成,認識、音響心理)(音声の基礎と応用シンポジウム)
- 軟口蓋音における調音結合 : MR動画撮像法による観察
- MRIコイルと外部トリガ同期撮像法による発声動作の高分解能撮像
- Synchronized Sampling Method(SSM)を利用した4D-MRI
- 3次元MRI動画撮影による声道立体形状の時間変化の計測
- 3D MRI movieによる声道断面積関数の時間パタンの抽出
- MRI による発話運動の3次元動画記録
- 構音時の舌筋機能 : Tagging MRI Movieを用いた研究
- 単語処理タスクにおける脳波の解析
- 復唱状態と単純聴取時における母音誘発脳活動
- 口腔復元模型を用いた声道断面積関数の音響的計測
- 子音調音時の舌口蓋接触圧の観測
- 母音学習過程における音声知覚と調音変化の関係について
- fMRIにより観測した音声生成時の大脳・小脳・脳幹の活動
- 有声・無声子音における喉頭と軟口蓋の運動 -動的MRIによる観測-
- MRI用歯冠造影プレートの摩擦子音構音への影響 : X線マイクロビームを用いた観察
- 造影プレートを利用したMRIによる歯冠部造影法とその構音への影響
- 近赤外分光法を用いた音刺激に対するヒト脳の活動の計測
- F_0調節の生理機構に関する磁気共鳴画像(MRI)の分析
- 母音生成における口唇突き出しのメカニズム
- 音響計測、電気回路理論および有限要素法により求めた声道模型の伝達関数の比較(音響と音声処理,音声強調,ロバスト音声認識)
- 声道形状のMRI計測における歯列補填法
- 音響計測およびシミュレーションによる声道模型の伝達特性の比較
- 上下歯列間間隙により生じる声道の分岐管
- 3次元MRI動画データと実音声を用いた声道断面積モデルのパラメータ推定
- 3次元舌モデルを用いる母音構音のforce vector及びλvectorに関する検討(音声・聴覚,一般)
- D-16-9 生理学的モデルに基づく舌手術補助インタフェースの構築(D-16.医用画像,一般講演)
- 音声処理法の相違による人工内耳装用者語音聴取能の変化
- 喉頭モデルでカップリング問題関する数値解析(音声・聴覚,一般)
- 発話機構モデルに基づく音声と調音状態との一対多の関係に関する考察
- 音声と一対多の関係にある調音状態の分布構造 : 発話機構モデルに基づく考察(聴覚・音声・言語とその障害,一般)
- D-14-17 破裂子音の音響特徴に関する研究(D-14. 音声,一般セッション)
- 脳磁界計測法と近赤外分光法を用いた聴覚野の血液動態の測定
- トピックス8 X線撮影と音声研究(〈特集〉-音響学における20世紀の成果と21世紀に残された課題-)
- MRI装置内における骨導音による聴覚刺激提示法
- 母音発話MRIデータに基づく声道模型の音響特性(立体音響・トランスデューサ/一般)
- 声門開放時の声道共鳴特性(聴覚・音声・言語とその障害,一般)
- 喉頭腔の音響特性(一般, 一般, チュートリアルレクチャー)
- 声道伝達特性における喉頭腔の影響
- 声道断面積関数の時間補間による音声合成
- ボクセルメッシュを用いた有限要素法による声道の音響解析(一般)
- リアルな発話運動を実現する生理学的口唇力学モデルの構築(バイオサイバネティックス, ニューロコンピューティング)
- 模倣による調音ダイナミクスモデル制御の獲得(「脳・認知科学」及び一般)
- 音声生成における軟口蓋の働きのモデル化に関する研究(音声・聴覚,一般)
- 調音運動ダイナミクスの音声認識への応用(聴覚・音声/一般)
- フォーカスが下顎の運動におよぼす影響
- 有限要素法による母音の声道中の伝播経路
- 声の高さの調節における喉頭の位置変化の役割
- 舌と喉頭との相互作用を考慮した発話器官の生理学的モデル
- ピッチ変換聴覚フィードバックの喉頭筋制御への影響について
- 母音口形図形の知覚
- 口唇の調音動作を実現する生理学的モデル
- 調音データに基づいた調音結合の分析
- 母音生成研究と観測技術の進展(母音研究 : Chiba&Kajiyamaから最新研究まで)
- 日本語/aN/と中国語/an,ang/における調音結合のMRI動画観測(調音・韻律)(音声の基礎と応用シンポジウム)
- 音声生成機構のMRI観測と生理学的調音モデル(聴覚・音声・言語とその障害)
- 発話時舌内部変形のモデルシミュレーションとtagged-MRIによる観測との比較(合成, 生成, 韻律, 一般)
- 筋の拮抗関係を考慮した生理学的調音モデルの制御
- 発話機構モデルによる逆推定法を用いた音韻の識別
- 発話機構モデルによる声道形状逆推定法を用いた音韻と発話様式の分析
- 発話機構モデルによる声道形状逆推定法を用いた音韻と発話様式の分析
- 生理学的調音モデルを用いた音声信号に基づく声道形状の推定
- 生理学的調音モデルを用いる音声合成法
- 生理的喉頭モデルによる基本周波数の制御
- 生理学的調音モデルを用いた母音系列の合成
- 生理学的調音モデルに基づく3次元声道形状の生成
- 傍矢状面の変形を考慮した舌の生理学的モデル
- 中国語母音における舌の調音運動の三次元的観測
- 音声と一対多の関係にある調音状態の分布構造--発話機構モデルに基づく考察
- 乳幼児の音声模倣能力の獲得過程における調音ジェスチャの役割(聴覚・音声/一般)
- 通常発話状態と特異発話状態との判別基準の検討(聴覚・音声/一般)
- 乳幼児の音声模倣能力の獲得過程における調音ジェスチャの役割
- 通常発話状態と特異発話状態との判別基準の検討
- 日本語5母音の調音・音響的観測とモデルシミュレーションとの比較(音声・聴覚,一般)
- 生理学的発話機構モデルを用いた音響特性と発話状態の関連性の検討
- 生理学的な調音モデルを用いた調音結合のモデル化及びシミュレーション
- 音響パプメータと調音パラメータの結合を考慮した音声認識(聴覚・音声・言語とその障害)
- 音響管内にある分岐の開口端補正とその形状との関連について
- 加重等分解度特徴量を用いたテキスト独立型話者識別
- 発話運動における調音結合の分析について
- 加重等分解度特徴量を用いた話者識別
- 生理学的特徴量の話者識別における有効性についての検討
- 復唱による母音学習過程における音声知覚に関する考察
- 舌の三次元的変形と筋電図との関連について
- 声道伝達特性における反共振特性の詳細を計測する新しい : 音響管を用いた実験的な検討
- ディジタルオーディオにおける深い感性に関連した音質劣化の原因究明--jitterに起因する音質劣化の仕組みの解明と新改善方法の検討 (特集 感性ロボティクス)
- 鼻腔と口腔との音響結合における軟口蓋の機能
- 母音発声時の音声スペクトルに対する梨状窩の影響
- 梨状窩(pyriform fossa)の音声スペクトルへの影響
- 副鼻腔音響特性の観測
- MR画像に基づいた変形による生理学的発話機構モデルの個人化(オーガナイズドセッション「音声知覚生成インタラクション・音声認識合成統合技術」,音声知覚生成/聴覚コミュニケーション,一般)