ブラインド音源分離と頭部伝達関数を用いた音楽演奏を題材とした自由視聴点コンテンツの制作(ブラインド信号処理/一般)
スポンサーリンク
概要
- 論文の詳細を見る
本研究では,ユーザが選択した任意位置における映像,音を視聴することができる自由視聴点TVシステム(Free viewpoint and listening point TV system:FTV)の開発を目指す.本システムでは,任意視点映像の生成には光線空間法を用い,任意聴点音の生成には音源分離技術を用いる.様々な楽器で構成された信号から個々の楽器演奏を抽出し,ユーザが選択した任意位置と演奏者の間に対応する頭部伝達関数を畳み込み,再合成することで,任意聴点音を生成可能である.分離性能が高いほど,定位感のある演奏を聴くことが可能となるが,環境,音源の指向性,観測位置の違いがどのように分離性能に影響するかについて,スピーカを用いた実験で調査した.また,実環境にて楽器演奏を映像・音声を同期収録し,FTVのデモをWEBにて公開する.マイクロホンペア選択型の音源分離手法,及び参照音が得られない実音源に対する評価尺度を提案し,提案手法が楽器演奏に対して高い分離性能を発揮することが示された.
- 2007-06-22
著者
-
西野 隆典
名古屋大学情報メディア教育センター
-
武田 一哉
名古屋大学大学院情報科学研究科
-
丹羽 健太
名古屋大学大学院情報科学研究科
-
西野 隆典
三重大学大学院工学研究科
-
西野 隆典
名古屋大学情報メディア教育センター:(現)三重大学大学院工学研究科
-
武田 一哉
名古屋大 大学院情報科学研究科
-
武田 一哉
名古屋大学情報科学研究科
-
武田 一哉
名古屋大学工学部
-
武田 一哉
名古屋大学
-
西野 隆典
名古屋大学エコトピア科学研究所
-
丹羽 健太
日本電信電話NTTサイバースペース研究所
-
丹羽 健太
名古屋大学大学院:日本電信電話株式会社NTTメディアインテリジェンス研究所
関連論文
- 正十二面体マイクロホンアレイを用いた実環境における音源信号分離の検討 (音声)
- ユーザ負担のない話者・環境適応性を実現する自然な音声対話処理技術の総合開発(総合報告)
- ジェスチャインタフェースのための指先動作軌跡の統計的分割と正規化(信号処理,知的マルチメディアシステム,及び一般)
- ジェスチャインタフェースのための動作軌跡信号の統計的分割と認識(セッション4 : 理解るインタフェース : 手+足+触覚)
- 日常会話における発話タイミング分析
- 正十二面体マイクロホンアレイを用いた周波数領域ICAのpermutation問題に対する解決策の検討(音響信号処理/一般)
- 畳み込みHMMに基づく歌声の基本周波数制御モデルの提案とそのパラメータ学習方法(音響分析一般(1))
- 合同特別企画: パネルディスカッション「"音"研究の未来」
- 両耳室内インパルス応答の時空間周波数特性を利用した残響成分の解析
- 多様な音響環境下における音声認識システム利用時のデータ収集システム(音声,聴覚)
- 雑音下音声認識評価ワーキンググループ活動報告 : 認識に影響する要因の個別評価環境(3)(SIG-SLP内組織の活動報告)
- 雑音下音声認識評価ワーキンググループ活動報告 : 認識に影響する要因の個別評価環境(2)(雑音・VAD,第9回音声言語シンポジウム)
- 雑音下音声認識評価ワーキンググループ活動報告 : 認識に影響する要因の個別評価環境 (2)(雑音・VAD,第9回音声言語シンポジウム)
- 雑音下音声認識評価ワーキンググループ活動報告 : 認識に影響する要因の個別評価環境(第8回音声言語シンポジウム)
- 雑音下音声認識評価ワーキンググループ活動報告 : 認識に影響する要因の個別評価環境(Session-1 検出,第8回音声言語シンポジウム)
- A-17-6 ドライブレコーダで収録した車両加速度を用いた運転特性の認識(A-17. ITS,一般セッション)
- 11.人にやさしい音声インタフェース(第2部:情報の高信頼蓄積・検索技術等の開発,学と産の連携による基盤ソフトウェアの先進的開発)
- CENSREC-1-C : 雑音下音声区間検出評価基盤の構築
- 自動車運転のマルチモーダル信号収録装置の開発(マルチモーダルシステム,システム開発論文)
- SLP雑音下音声認識評価WG活動報告 : 評価用データと評価手法について(Session-6 スペシャルセッション: 共通コーパスを利用した耐雑音技術評価, 第7回音声言語シンポジウム)
- 実走行車内単語音声データベースCENSREC-3と共通評価環境の構築
- CENSREC-3 : 実走行車内単語音声データベースと評価環境の構築(ポスターセッション)(第6回音声言語シンポジウム)
- 実環境下音声認識の評価の標準化とその動向(音声・言語における標準化動向)(第6回音声言語シンポジウム)
- AURORA-2Jを用いたETSI STQ Aurora WI008 Advanced DSR Frontendの評価(ポスターセッション)(第5回音声言語シンポジウム)
- AURORA-2Jを用いたETSI STQ Aurora WI008 Advanced DSR Frontendの評価(第5回音声言語シンポジウム : ポスターセッション)
- 運転操作信号のケプストラム分析に基づく運転者識別
- 運転行動信号に含まれる個人性のモデル化(自動車・交通におけるコミュニケーション&インタフェース及び一般)
- 多視点・多聴点データ取得システムを用いた自由視聴点映像生成(研究速報,三次元・多視点映像処理,画像符号化・映像メディア処理レター)
- 音声対話システムの対話履歴N-gramを利用したユーザ満足度推定手法 (音声)
- 時系列アクティブ探索法に基づく運転行動の類似検索 (音声)
- 時系列アクティブ探索法に基づく運転行動の類似検索 (パターン認識・メディア理解)
- A-17-22 実環境大規模運転データベースの構築と閲覧システムの開発(A-17.ITS,一般セッション)
- 自動車運転行動のマルチモーダル信号コーパス(マルチモーダル)
- A-17-5 運転データ同期収録車両の開発と実走行環境における計測(A-17. ITS,一般セッション)
- マイクロコンピュータを用いた単発音入力インタフェースの開発(セッション1 : 理解るインタフェース : 音インタフェース)
- 追従走行における個人性を考慮したペダル操作量の推定(信号処理,符号化,知的マルチメディアシステム,一般)
- 音声認識システムの満足度評価におけるユーザモデル(言語モデル・システム,第10回音声言語シンポジウム)
- デモンストレーション:若手による研究紹介IV
- 確率的手法を用いた車線変更軌跡のモデル化
- 雑音下音声認識評価ワーキンググループ活動報告 : 認識に影響する要因の個別評価環境(2)(雑音・VAD,第9回音声言語シンポジウム)
- 合同特別企画: パネルディスカッション「"音"研究の未来」
- 音声対話システムの対話履歴 N-gram を利用したユーザ満足度推定手法
- 運転行動データベースの構築とその応用 (「運転行動信号処理」特集号)
- 運転行動信号処理の現状と展望 (「運転行動信号処理」特集号)
- 雑音下マルチモーダル音声認識評価基盤CENSREC-1-AVの構築
- 座談会 : 音声研究を語る : (小特集:)
- 部分文仮説のゆう度を用いた連続音声認識のための音声区間検出法
- Nベスト意味探索と再評価法を用いた大規模内線受付装置の試作
- 音声対話システムの対話履歴N-gramを利用したユーザ満足度推定手法(対話,第11回音声言語シンポジウム)
- 音声対話システムの対話履歴N-gramを利用したユーザ満足度推定手法
- 空間音響特性を考慮したスぺースダイバーシチ型ロバスト音声認識(音声情報処理 : 現状と将来技術論文特集)
- 室内音響特性を考慮した音声認識に関する検討
- 空間音響特性依存HMMによるスペースダイバーシチ型ロバスト音声認識
- 空間音響特性依存HMMによるスペースダイバーシチ型ロバスト音声認識
- 正十二面体マイクロホンアレイを用いた実環境における音源信号分離の検討(音声,応用音響,一般,音声,応用/電気音響,信号処理,及び一般)
- 正十二面体マイクロホンアレイを用いた実環境における音源信号分離の検討(音声,応用音響,一般,音声,応用/電気音響,信号処理,及び一般)
- 正十二面体マイクロホンアレイを用いた実環境における音源信号分離の検討(音声,応用音響,一般,音声,応用/電気音響,信号処理,及び一般)
- 給電指令電話の音声検索システム
- 端点検出を行わない連続音声認識
- 端点検出を行わない連続音声認識手法
- 端点検出を行わない連続音声認識手法
- 端点検出を行わない連続音声認識手法
- 雑音下音声認識評価ワーキンググループ活動報告 : 認識に影響する要因の個別評価環境(Session-1 検出,第8回音声言語シンポジウム)
- 頭部伝達関数の方向依存性と個人依存性に対する補間・推定手法(バイノーラル技術による立体音響再生の動向)
- 時系列アクティブ探索法に基づく運転行動の類似検索(テーマセッション,クロスモーダル)
- 交差点進入時の運転行動の推定(テーマセッション,クロスモーダル)
- 時系列アクティブ探索法に基づく運転行動の類似検索(テーマセッション,クロスモーダル)
- 交差点進入時の運転行動の推定(テーマセッション,クロスモーダル)
- 時系列アクティブ探索法に基づく運転行動の類似検索(テーマセッション,クロスモーダル)
- 交差点進入時の運転行動の推定(テーマセッション,クロスモーダル)
- 時系列アクティブ探索法に基づく運転行動の類似検索(テーマセッション,クロスモーダル)
- 交差点進入時の運転行動の推定(テーマセッション,クロスモーダル)
- A-17-5 信号なし交差点における運転行動予測モデル(A-17. ITS,一般セッション)
- ベイジアンネットワークを用いた単一チャネル信号による背景音楽抑圧(音響処理・話者同定,第10回音声言語シンポジウム)
- マイクロコンピュータを用いた単発音入力インタフェースの開発(セッション1 : 理解るインタフェース : 音インタフェース)
- 自動車内における両耳室内伝達関数を用いた話者と受聴者の位置推定に関する検討(ブラインド信号処理/一般)
- ベイジアンネットワークを用いた単一チャネル信号による背景音楽抑圧(音響処理・話者同定,第10回音声言語シンポジウム)
- ベイジアンネットワークを用いた単一チャネル信号による背景音楽抑圧(音響処理・話者同定,第10回音声言語シンポジウム)
- ブラインド音源分離と頭部伝達関数を用いた音楽演奏を題材とした自由視聴点コンテンツの制作(ブラインド信号処理/一般)
- B-13-41 ブリルアンゲインスペクトル形状解析に基づく内空変位計測(B-13.光ファイバ応用技術,一般セッション)
- B-13-40 分布観測されたブリルアンゲインスペクトルデータの圧縮(B-13.光ファイバ応用技術,一般セッション)
- 両耳室内インパルス応答の時空間周波数特性を利用した残響成分の解析
- 両耳室内インパルス応答の時空間周波数特性を利用した残響成分の解析
- B-13-39 遺伝的アルゴリズムを用いた最適化計算による光ファイバひずみ分布計測精度向上(B-13.光ファイバ応用技術,一般セッション)
- マイクロホンアレーを用いた自由聴点音場再生システムに関する理論的検討(ANC・エコーキャンセラ・ノイズキャンセラ/一般)
- 両耳間音圧差の包絡を用いたガウス分布モデルに基づく音源方向推定
- RJ-003 無線加速度センサを用いた頭部運動の計測(ヒューマンコミュニケーション&インタラクション,査読付き論文)
- 頭部近傍におけるHRTFの距離依存特性に関する検討(音響信号及び音声処理、エンハンスメント/一般)
- 動作を伴う発話の収集とその認識(音声基盤技術・インタフェース)
- 動作を伴う発話の収集とその認識(音声基盤技術・インタフェース)
- 統計モデルを用いた音源方向推定(応用音響研究会創設50周年記念号)
- 頭部近傍のHRTF計測用小型12面体スピーカの開発および評価(音響・超音波サブソサイエティ合同研究会)
- ケプストラム分析を用いた室内伝達関数のモデル化の検討
- ケプストラム分析を用いた室内伝達関数のモデル化の検討
- スパーク音源を用いた頭部伝達関数の測定
- 聴覚マスキングを用いた頭外音像定位の評価法の検討
- B-13-29 ブリルアンゲインスペクトル推定区間の細分化によるひずみ計測精度向上(B-13.光ファイバ応用技術,一般セッション)
- 主観評価実験に基づく和音推定システムの検討
- ブリルアンゲインスペクトル観測による円環の直径変化計測(光波センシング,光波制御・検出,光計測,ニューロ,一般)
- ブリルアンゲインスペクトル観測による円環の直径変化計測(光波センシング,光波制御・検出,光計測,ニューロ,一般)