歌詞情報に基づくWeb画像検索を利用した歌詞連動スライドショー生成システム
スポンサーリンク
概要
- 論文の詳細を見る
本研究ではユーザが入力した楽曲に対して,楽曲の歌詞に基づいて検索したWeb画像と楽曲を同期させて再生するスライドショー生成システムについて提案する.楽曲歌詞の内容に適した画像を楽曲と同期させて再生することで,楽曲の情景表現を向上させ,より印象深い音楽体験の実現を目指す.具体的には,歌詞中の単語と,歌詞から推定した全体印象語から最適な画像検索クエリを抽出し,表示候補となる画像をWeb上から取得する.取得した画像に付与されているソーシャルタグと全体印象語の適合度を用いることで,歌詞の各行と連動して表示させる画像を選定する.さらに,歌詞の各行を表示する時間の最頻値を利用してスライドショー再生時の画像切替えを自動化する.最終的に,被験者評価実験により本システムの有効性を示す.
- 2013-04-15
著者
-
甲藤 二郎
早稲田大学基幹理工学研究科
-
帆足 啓一郎
株式会社kddi研究所
-
甲藤 二郎
早稲田大学基幹理工学研究科情報理工学専攻
-
小野 智弘
KDDI研究所
-
甲藤 二郎
早稲田大学理工学部コンピューターネットワーク工学科
-
甲藤 二郎
早稲田大学理工学術院コンピュータネットワーク工学科
-
舟澤 慎太郎
早稲田大学理工学術院
-
甲藤 二郎
早稲田大学基幹情報理工学研究科
-
甲藤 二郎
早稲田大学理工学術院基幹理工学部
-
小野 智弘
KDDI研
関連論文
- イントラ圧縮動画像のフレーム合成を用いたひずみ低減手法の特性改善(ITS画像処理,映像メディア,視覚および一般)
- 動き検出による複数フレームの合成と量子化制約条件を考慮した符号化ひずみ低減方法 (画像符号化・映像メディア処理レター特集)
- 複数のイントラ符号化形式で圧縮された動画像の画質改善手法の提案(画像符号化,通信・ストリーム技術,一般)
- 複数のイントラ符号化形式で圧縮された動画像の画質改善手法の提案(画像符号化,通信・ストリーム技術,及び一般)
- 複数のイントラ符号化形式で圧縮された動画像の画質改善手法の提案(画像符号化,通信・ストリーム技術,及び一般)
- 複数のイントラ符号化形式で圧縮された動画像の画質改善手法の提案(画像符号化,通信・ストリーム技術,及び一般)
- H.264/AVC符号化画像におけるDCT係数を用いたPSNR/SSIM推定 (メディア工学 コンシューマエレクトロニクス)
- 人物のリアルタイム三次元位置推定実験に関する一検討(センサネットワーク,Webにおける映像メディア処理,応用及び一般)
- 映像位相同期制御による映像切替・合成遅延の最小化
- DS-3-4 映像位相同期制御による映像合成遅延最小化の検証(DS-3.通信ネットワーク利用放送技術,シンポジウム)
- ユーザ支援による自動採譜の性能向上(モバイルマルチメディアアプリケーション,モバイルP2P,画像符号化,ストリーム技術)
- ユーザ支援による自動採譜の性能向上(一般セッション,モバイルマルチメディアアプリケーション,モバイルP2P,画像符号化,ストリーム技術)
- 5R-2 歌詞の印象に基づく楽曲検索のための楽曲自動分類に関する検討(音楽検索・解析,学生セッション,人工知能と認知科学)
- イントラ圧縮動画像のフレーム合成を用いたひずみ低減手法の特性改善 (画像工学)
- イントラ圧縮動画像のフレーム合成を用いたひずみ低減手法の特性改善 (ITS)
- 複数情報の統合による人物の性別・年齢層の推定法(顔とジェスチャの認識)
- 無線ネットワークにおけるライブビデオストリーミングに向けた輻輳制御と符号器の協調(モバイルネットワーク)
- Seam-Carvingを用いた画像の学習効率および認識率向上に関する検討
- 楽曲の音響的特徴空間視覚化を利用した音楽検索システム(音楽検索)
- D-14-21 音響的特徴を利用した楽曲間処理による音楽連続再生手法の提案(D-14. 音声,一般セッション)
- Content-based音楽検索におけるビットレート違いを考慮した楽曲特徴量正規化手法(音楽理論・分析)
- Content-based音楽検索におけるビットレート違いを考慮した楽曲特微量正規化手法(音楽理論・分析)
- 全方位画像と通常画像のハイブリッド合成に関する検討(モバイルマルチメディアアプリケーション,モバイルP2P,画像符号化,ストリーム技術)
- 全方位画像と通常画像のハイブリッド合成に関する検討(一般セッション,モバイルマルチメディアアプリケーション,モバイルP2P,画像符号化,ストリーム技術)
- RTT公平性を実現するUDP輻輳制御方式の提案(QoS)
- 動き検出による複数フレームの合成と量子化制約条件を考慮した符号化ひずみ低減方法(研究速報,画像符号化,画像符号化・映像メディア処理レター)
- H.264/AVC符号化画像におけるDCT係数を用いたPSNR/SSIM推定(画像映像処理・システム,ネットワーク,放送,一般)
- 環境情報のWebサービス化と視覚化アプリケーションの設計(ネット,ゲーム等,仮想空間における映像メディアの処理,表現,応用,及び一般)
- 色チャンネル推定を用いた不可視バーコード抽出
- ビジュアルセンサネットワークのためのリソース指向アーキテクチャ(信号処理,知的マルチメディアシステム,及び一般)
- ビジュアルセンサネットワークのためのリソース指向アーキテクチャ
- I-062 監視カメラ映像からの実時間顔検出手法の一検討(I.画像認識・メディア理解)
- 複数情報の統合による人物の性別・年齢層の推定法
- 楽曲推薦システムのための楽曲波形と歌詞情報を考慮した類似楽曲検索に関する一検討
- B-6-123 AODV を用いたアドホックネットワークにおける TCP 特性改善方式の一提案
- SB-14-6 Multipath Extension of AODV with Enhanced Route Establishment and Proactive Route Management
- Motion JPEGにおける動き検出と量子化制約条件を用いた符号化ひずみ低減方法(画像符号化,通信・ストリーム技術,一般)
- Motion JPEGにおける動き検出と量子化制約条件を用いた符号化ひずみ低減方法(画像符号化,通信・ストリーム技術,及び一般)
- 複数の圧縮画像の合成時におけるPSNR改善効果の一検討(研究速報,圧縮画像の画質改善,画像符号化・映像メディア処理レター)
- 付加情報を用いたデコーダ側での画質改善に関する検討(研究速報,圧縮画像の画質改善,画像符号化・映像メディア処理レター)
- 任意のフレームから復号が可能なフレーム間符号化の検討(研究速報,動画像符号化,画像符号化・映像メディア処理レター)
- 複数の圧縮画像を用いた量子化誤差低減効果および主観画質向上の検証
- D-11-23 JPEG/JPEG-2000圧縮画像の合成による主観画質向上(D-11. 画像工学,一般セッション)
- 付加情報を用いた符号化画質改善手法に関する検討(画像符号化,通信・ストリーム技術,及び一般)
- 有線(アクセス系通信方式,ホームネットワークを支える要素技術,ホームネットワーク)
- D-12-61 顔画像認識のためのハイブリッド型 Embedded HMM の検討
- IM-GPDCTと動き検出を用いた圧縮動画像の高解像度化(画像符号化,通信・ストリーム技術,一般)
- IM-GPDCTと動き検出を用いた圧縮動画像の高解像度化(画像符号化,通信・ストリーム技術,及び一般)
- 人間がZigBeeに与える影響の解析と混雑度推定システムへの応用(センサネットワーク,アドホックネットワーク)
- VICを用いた有線無線混在網上の動画像配信実験 (ネットワークシステム)
- イントラ圧縮動画像のフレーム合成を用いたひずみ低減手法の特性改善
- CUBIC-TCPとHybrid-TCPの各種特性比較 (ネットワークシステム)
- RTT公平性を考慮したHybrid-TCP輻輳制御(マルチメディア(システム/通信/ネットワーク),放送通信連携サービスとその品質,一般)
- RTT公平性を考慮した Hybrid-TCP 輻輳制御
- RTT公平性を考慮したHybrid-TCP輻輳制御(通信技術,マルチメディア(システム/通信/ネットワーク),放送通信連携サービスとその品質,一般)
- B-7-139 YeAH-TCPの特性改善(B-7. 情報ネットワーク,一般セッション)
- Hybrid-TCPの特性改善(QoS)
- D-12-77 Seam-carvingを用いた画像の学習効率および認識率向上に関する検討(D-12.パターン認識・メディア理解B(コンピュータビジョンとコンピュータグラフィックス),一般セッション)
- I-025 ドロネー四面体分割を用いたタンパク質構造比較(I.画像認識・メディア理解)
- イントラ圧縮動画像のフレーム合成を用いたひずみ低減手法の特性改善(ITS画像処理,映像メディア,視覚及び一般)
- CUBIC-TCPとHybrid-TCPの各種特性比較(プロトコル)
- 無線LAN環境における802.11eとウィンドウ制御を併用したTCP-Vegasの特性改善(プロトコル)
- 無線マルチホップアドホックネットワークにおけるTCP-Vegasを拡張した輻輳制御方式(アドホックネットワーク)
- 無線センサネットワークにおけるエネルギー消費の低減および均一化を図るクラスタリング手法(無線ネットワーク・センサネットワーク)
- VICを用いた有線無線混在網上の動画像配信実験(トラヒック)
- B-6-134 センサネットワークにおけるハイブリッドMAC手法の一提案(B-6.ネットワークシステム,一般セッション)
- Circle of Fifth平面を用いたキー推定(音高・和音・調認識)
- B-6-137 無線センサネットワークにおけるエネルギー消費の低減及び均一化を図るクラスタリング手法(B-6.ネットワークシステム,一般セッション)
- B-6-145 無線LAN環境における802.11eとウィンドウ制御を併用したTCP-Vegasの特性改善(B-6.ネットワークシステム,一般セッション)
- B-6-140 無線マルチホップアドホックネットワークにおけるTCP-Vegasを拡張した輻輳制御方式(B-6.ネットワークシステム,一般セッション)
- A-15-25 歌詞情報を利用したWeb画像・楽曲連動スライドショー自動生成システムにおける画像切り替え間隔の改善(A-15.ヒューマン情報処理,一般セッション)
- D-11-88 DCT係数を用いたH.264/AVCイントラフレームのPSNR推定(D-11.画像工学,一般セッション)
- 3X-7 Circle of Fifth平面を用いたキー推定(音楽情報科学(2)自動作曲・楽曲分析,学生セッション,人工知能と認知科学)
- ユーザ支援による自動採譜の性能向上(一般セッション,モバイルマルチメディアアプリケーション,モバイルP2P,画像符号化,ストリーム技術)
- Graph Cutsを用いたBag-of-Keypoints法の特性改善に関する検討
- 拡散符号(直交符号)を用いた多重階層変調システムの提案
- IM-GPDCTと動き検出を用いた圧縮動画像の高解像度化(画像符号化,通信・ストリーム技術,及び一般)
- IM-GPDCTと動き検出を用いた圧縮動画像の高解像度化(画像符号化,通信・ストリーム技術,及び一般)
- 複数の拡大手法と選択的低周波数置換によるIM-GPDCTの性能改善(研究速報,映像メディア応用,画像符号化・映像メディア処理レター)
- 色チャンネル推定を用いた不可視バーコード抽出
- 音楽のムード分類結果を利用したホームビデオへのBGM付与支援システム
- B-6-1 センサネットワークにおける同期型間欠通信手法の提案(B-6.ネットワークシステム,一般セッション)
- 複数情報の統合による人物の性別・年齢層の推定法(顔とジェスチャの認識)
- G-013 確率推論に基づく自動採譜システムの検討(G.音声・音楽)
- D-14-22 Hopfield 型ニューラルネットワークを用いた音源同定
- ビジュアルセンサネットワークのためのリソース指向アーキテクチャ(信号処理,知的マルチメディアシステム,及び一般)
- 歌詞情報を利用したWeb画像・楽曲連動スライドショー自動生成システム
- Doubly nested Circle of Fifthsを用いた和音認識
- B-7-45 ロス公平性を実現するTCP輻輳制御方式(B-7.情報ネットワーク,一般セッション)
- RTT公平性を考慮したHybrid-TCP輻輳制御(通信技術,マルチメディア(システム/通信/ネットワーク),放送通信連携サービスとその品質,一般)
- RTT公平性を考慮したHybrid-TCP輻輳制御(通信技術,マルチメディア(システム/通信/ネットワーク),放送通信連携サービスとその品質,一般)
- Graph Cutsを用いたBag-of-Keypoints法の特性改善に関する検討(認識・抽出,視覚情報処理,画像メディア処理・符号化,一般)
- D-11-102 Graph Cutsを用いたBag-of-Keypoints法の特性改善に関する検討(D-11.画像工学,一般セッション)
- 全方位画像と通常画像のハイブリッド合成に関する検討(一般セッション,モバイルマルチメディアアプリケーション,モバイルP2P,画像符号化,ストリーム技術)
- Underwater Sensor Networkにおけるオンデマンドルーティング方式の検討 (ネットワークシステム)
- 中間調画像の色ビット深度拡張に関する検討(画像応用技術,時空間映像処理,画像符号化及び一般)
- D-11-40 中間調画像のビット深度補間に関する一検討(D-11.画像工学,一般セッション)
- 物体領域抽出による画像の識別率向上に関する検討 (メディア工学)
- B-6-56 VICを用いた無線有線混在網上の動画像配信実験(B-6.ネットワークシステム,一般セッション)
- 環境情報のWebサービス化と視覚化アプリケーションの設計(ネット,ゲーム等,仮想空間における映像メディアの処理,表現,応用,及び一般)