歌詞情報に基づくWEB画像検索を利用した楽曲連動スライドショー生成システム
スポンサーリンク
概要
- 論文の詳細を見る
本研究ではユーザが入力した楽曲に対して,楽曲の歌詞情報を基に検索した WEB 画像を,楽曲と同期させて再生するスライドショーを自動生成するシステムについて提案する.楽曲歌詞の内容に適した画像を楽曲と同期させて再生することで,楽曲が表現する情景表現を向上させ,より印象深い音楽体験の実現を目指す.具体的には,歌詞に含まれる単語と,歌詞情報から推定した全体印象語から最適な画像検索クエリを抽出し,表示候補となる画像を取得する.取得した画像に付与されているソーシャルタグと全体印象語の適合度を用いることで,行と連動して表示させる写真を選定する.さらに,歌詞行の表示時間の最頻値を利用して,スライドショー再生時の画像切替えを自動化する.最終的に被験者評価実験により本システムの有効性を示す.
- 2011-07-07
著者
-
石先 広海
KDDI研究所
-
帆足 啓一郎
KDDI研究所
-
帆足 啓一郎
株式会社kddi研究所
-
小野 智弘
KDDI研究所
-
小野 智弘
(株)KDDI研究所
-
小野 智弘
(株)kddi研究所知能メディアグループ
-
石先 広海
KDDI研
-
小野 智弘
KDDI研
関連論文
- コミック画像におけるコマの角検出に関する一検討 (モバイルマルチメディア通信)
- 音質劣化を考慮した音楽自動リミックス手法(セッション2 物理)
- 位置情報メタデータを利用した画像検索手法の実装と評価(テーマ,膨大なデータから学ぶもの)
- 5R-2 歌詞の印象に基づく楽曲検索のための楽曲自動分類に関する検討(音楽検索・解析,学生セッション,人工知能と認知科学)
- 2D-5 楽曲類似検索における特徴量抽出の高速化(音声・音楽情報処理,一般セッション,人工知能と認知科学)
- 2D-4 自動DJミックス再生における信号伸縮率を用いた楽曲順序決定方法(音声・音楽情報処理,一般セッション,人工知能と認知科学)
- 楽曲の音響的特徴空間視覚化を利用した音楽検索システム(音楽検索)
- 地デジ放送からの字幕主体の携帯電話向け要約コンテンツの自動生成(ITS画像処理,映像メディア及び一般)
- 地デジ放送からの字幕主体の携帯電話向け要約コンテンツの自動生成(新サービス,ITS画像処理,映像メディア及び一般)
- 画像類似度を利用した位置情報付き写真データへのランドマーク情報付与手法(ウェブ情報とデータベースに関して(ポスター講演))
- D-12-25 CGM動画像におけるハイライト画像抽出手法に関する考察(D-12. パターン認識・メディア理解,一般セッション)
- D-14-21 音響的特徴を利用した楽曲間処理による音楽連続再生手法の提案(D-14. 音声,一般セッション)
- Content-based音楽検索におけるビットレート違いを考慮した楽曲特徴量正規化手法(音楽理論・分析)
- Content-based音楽検索におけるビットレート違いを考慮した楽曲特微量正規化手法(音楽理論・分析)
- フレームクラスタリングを利用したCGM動画像コンテンツ検索手法の提案(日本語セッション1,第二回日韓パターン認識ワークショップ(KJPR))
- D-035 次元圧縮を用いたクロスメディアレコメンデーション方式の提案(D分野:データベース)
- 汎用的特徴量に基づく動画像話題分割手法(画像・映像処理)
- TRECVIDにおける映像検索技術の評価方式と技術トレンド(チュートリアル)
- D_033 確定的アニーリングEMアルゴリズムを用いたクロスメディアレコメンデーション方式の提案(D分野:データベース)
- 協調フィルタリングと属性ベースフィルタリングの統合について(ベイズ情報処理,ベイズ情報処理及び一般)
- 携帯電話とWebをつなぐ新しい試み(Mobile Web)
- 嗜好のモデル化におけるモデル適応について(ヒトの行動とモデル,神経ダイナミクス,一般)
- 携帯電話ユーザのための映画嗜好モデル構築と映画推薦システム (テーマ:特集「ベイジアンネット,ヒューマンモデリング」および一般)
- ベイジアンネットによる映画コンテンツ推薦方式の検討(ベイジアンネット1 : ポスターセッション)
- 携帯電話とWebをつなぐ新しい試み (特集 Mobile Web)
- 協調フィルタリングにおける評価値予測アルゴリズムを応用した検索式拡張手法
- D-15-25 類似検索技術を応用した学術論文情報配信システム
- 文書自動分類手法を用いた有害情報フィルタリングソフトの開発
- 非適合プロファイルを利用した文書フィルタリング手法
- D-15-3 有害情報フィルタリングソフトのフィールド試験結果
- 1.仮想状況と現実状況における食事メニュー嗜好の差異について(一般セッション 認知・情報)
- D-008 トピック判定におけるn-gramの高速組み合わせ手法の検討(データベース,一般論文)
- 映像情報検索とその評価技術の最前線
- 文書構造を利用した類似検索手法の検討
- 音楽情報の検索
- クロスメディア型レコメンデーションの提案と評価
- 2.移動端末におけるユーザの状況を考慮した嗜好抽出技術(実世界上のユーザ行動に着目した嗜好抽出・情報推薦, 利用者の好みをとらえ活かす-嗜好抽出技術の最前線-)
- A-15-25 歌詞情報を利用したWeb画像・楽曲連動スライドショー自動生成システムにおける画像切り替え間隔の改善(A-15.ヒューマン情報処理,一般セッション)
- デモンストレーション : 音楽情報処理の研究紹介VI(デモセッション)
- D-4-8 Webページのリンク自動生成方式の評価(D-4.データ工学,一般セッション)
- 音楽情報の検索(認識,理解,対話,一般)
- 携帯電話向けにテレビ番組の要約コンテンツを配信するためのオーサリングツールの開発
- D-4-14 被リンクの時間情報に着目したWebページの信頼性判定手法(D-4. データ工学,一般セッション)
- 音楽のムード分類結果を利用したホームビデオへのBGM付与支援システム
- 位置情報メタデータを利用した画像検索手法の実装と評価(テーマ,膨大なデータから学ぶもの)
- コミック画像におけるコマの角検出に関する一検討
- 歌詞情報を利用したWeb画像・楽曲連動スライドショー自動生成システム
- 映像情報検索の最前線(Session-2 情報検索, 第7回音声言語シンポジウム)
- 映像情報検索の最前線(Session-2 情報検索, 第7回音声言語シンポジウム)
- 映像情報検索の最前線(Session-2 情報検索, 第7回音声言語シンポジウム)
- コミック画像におけるコマの角検出に関する一検討
- 画像類似度を利用した位置情報付き写真データヘのランドマーク情報付与手法
- デモンストレーション:音楽情報処理の研究紹介IX
- 1T-2 ホームビデオへの自動BGM付与のための心理学に基づく音楽分類手法(音楽分析・生成,学生セッション,人工知能と認知科学,情報処理学会創立50周年記念)
- 2D-3 自動DJミックス再生を用いた音楽ストリーム再生・配信システム(音声・音楽情報処理,一般セッション,人工知能と認知科学,情報処理学会創立50周年記念)
- 4C-1 オンラインディスカッションの効率性定量化手法の提案(ソーシャルWeb,一般セッション,データベースとメディア,情報処理学会創立50周年記念)
- デモンストレーション : 音楽情報処理の研究紹介VIII
- 特別セッション : ISMIRコミュニティからの招待講演
- デモンストレーション:音楽情報処理の研究紹介VIII
- 特別セッション:ISMIRコミュニティからの招待講演
- E-035 自動DJミックス再生における楽曲速度変化に伴う聴取者違和感指標に関する検討(自然言語・音声・音楽,一般論文)
- E-034 歌詞特徴を考慮したWeb画像と楽曲同期再生システムの提案(自然言語・音声・音楽,一般論文)
- 楽曲類似検索のための圧縮オーディオファイル形式からの高効率特徴抽出手法
- 地デジ放送からの字幕主体の携帯電話向け要約コンテンツの自動生成(新サービス,ITS画像処理,映像メディア及び一般)
- コンテンツ非依存特徴量に基づく動画像話題分割手法(テーマセッション: 映像インデクシング, データ工学とメディア理解との融合)
- コンテンツ非依存特徴量に基づく動画像話題分割手法(テーマセッション: 映像インデクシング, データ工学とメディア理解との融合)
- D-12-20 コーナー別SVMを利用した動画像話題分割手法(D-12. パターン認識・メディア理解, 情報・システム2)
- 文書間の類似度における単語寄与度を利用した検索式拡張手法
- RI-009 二言語間のタグ変換を用いた画像タグ付与システム(I分野:グラフィクス・画像,査読付き論文)
- E-033 音楽のムード分類結果を利用したホームビデオへの自動BGM付与・同期手法(E分野:自然言語・音声・音楽,一般論文)
- D-036 テレビ番組放送内容に連動したWeb情報選択手法の提案(D分野:データベース,一般論文)
- D-016 オンラインディスカッションの健全度定量化手法の提案(D分野:データベース,一般論文)
- ユーザ嗜好に基づく音楽情報検索システムにおける学習データ抽出手法
- 楽曲配信サービスを支える音楽情報検索技術
- ショット検出を頑強にするための学習用データの生成手法(テーマセッション: 映像インデクシング, データ工学とメディア理解との融合)
- ショット検出を頑強にするための学習用データの生成手法(テーマセッション: 映像インデクシング, データ工学とメディア理解との融合)
- モバイルエージェントによる携帯電話コンテンツ間連携統合方式の検討
- D-003 コンテンツ非依存特徴量に基づく動画話題分割手法(D.データベース)
- 聴取者違和感指標に基づく全自動DJミックスシステム
- D-4-8 オンラインディスカッション活性化のための状態可視化システム(D-4.データ工学,一般セッション)
- A-15-16 Web上の演奏動画を用いた合奏動画自動合成(A-15.ヒューマン情報処理,一般セッション)
- 歌詞情報に基づくWEB画像検索を利用した楽曲連動スライドショー生成システム
- マルチメディアコンテンツ検索技術の最新動向とその実用性
- ユーザの音楽嗜好に基づく音楽情報検索手法
- ユーザの音楽嗜好に基づく音楽情報検索手法
- D-5-2 コンテンツフィルタリングのためのHTML文書自動拡張手法
- Twitterを用いたテレビ番組からのイベント検出及びラベル付与手法
- 歌詞情報に基づくWEB画像検索を利用した楽曲運動スライドショー生成システム (モバイルマルチメディア通信)
- 歌詞情報に基づくWEB画像検索を利用した楽曲連動スライドショー生成システム(無線PAN,IPTV,画像符号化,ストリーム技術及び一般)
- 4-1 CGM動画像検索のための動き特徴の分散に基づいたハイライト区間抽出手法に関する考察(第4部門 メディア処理1)
- 表層的特徴とテキスト特徴に基づくオンラインディスカッションの健全度定量化手法
- 位置情報メタデータを利用した画像検索手法の実装と評価
- 位置情報メタデータを利用した画像検索手法の実装と評価
- 歌詞情報に基づくWeb画像検索を利用した歌詞連動スライドショー生成システム
- 8-7 CGM動画像検索のための索引ビデオ生成手法に関する検討(第8部門 画像認識・検索)
- D-015 テレビ番組関連Twitterタイムラインからの代表ツイート選択手法の提案(Webとソーシャルメディア,D分野:データベース)
- A-033 Extraction and Annotation of Personal Cliques from Social Networks
- E-041 演奏動画の盛り上がり検出に用いる特徴量の検討(音楽情報科学(MUS),E分野:自然言語・音声・音楽)
- 9-4 画像と歌詞の関連度を利用した楽曲連動パーソナルフォトスライドショー生成システム(第9部門デモセッション(聴講無料))
- 第5回 音楽情報の検索(講座 マルチメディア検索の最先端)