抽象絵画における鑑賞者の視線行動を利用した音楽作曲の検討
スポンサーリンク
概要
- 論文の詳細を見る
本検討は抽象絵画と音楽における互いの表現要素を工学的アプローチによって結びつけることで両者を融合した新しい表現を提案する。そのアプローチの方法として絵画鑑賞者の視線行動による画面上の注視要素の時系列的な変化を音楽の時間情報として利用する方法を考えた。今回は抽象絵画を対象に鑑賞者の視線行動を計測し、視線の停留時間は平均と異常値の両極端に別れることや、要素ごとの停留回数は要素の大きさと中心からの距離が大きく影響しているといった傾向が見られた。また、色と音の印象や共感覚保持者の感覚を参考に色と音のマッピングを検討することで注視要素を音に変換し、音群的音楽を踏襲する作曲方法の可能性を示した。
- 2012-01-27
著者
関連論文
- 初期テンペラ絵画のディジタル表示法に関する検討 : 色彩復元と物質感表現保存の試み(映像メディア処理と一般)
- 音と絵を響かせる--「アルガリズムプロジェクト ヨコハマ音のサーカス展」における作品制作
- D-12-22 テンソル分解法に基づく画像処理による個人認証における画像特徴量の比較検討(D-12.パターン認識・メディア理解A(パターンメディアの認識・理解・生成),一般セッション)
- 影と非影領域に基づく画像コントラスト強調研究(映像符号化,システム及び一般)
- 歴史・対話・街の創出 : 市川オープンミュージアム構想(奥田俊介先生、高木道信先生、高橋正先生退職記念号)
- 逆S字型変換による濃淡画像のコントラスト強調手法(画像・映像処理)
- 2方向顔画像からのテーブルゲーム競技者の視線検出法に関する検討(グループコミュニケーション,HCGシンポジウム)
- A-15-18 テーブルゲーム時の競技者の顔画像からの視線検出法の検討(A-15.ヒューマン情報処理,一般セッション)
- 顔面筋動作に基づく形状変形とテクスチャの張替えによる三次元人物顔画像の再構築(画像認識, コンピュータビジョン)
- A-16-31 台本のト書きの分析結果を利用したサイバーシアター・ディレクティング・システム
- D-12-16 テンソル分解法に基づくHOG特徴量を用いた人物の動作認識手法の検討(D-12.パターン認識・メディア理解,一般セッション)
- 色相に着目した灰色仮説に基づく照明光推定法の一提案
- D-12-15 色分け衣服を用いた動画像からの人物姿勢推定法の検討 : パーティクルフィルタにおける"'溢れ現象"を利用した人体パーツ追跡法の提案(D-12.パターン認識・メディア理解,一般セッション)
- 色分け衣服を用いた動画像からの人物姿勢推定のための人体パーツ追跡法の検討 : パーティクルフィルタによるオクルージョン判定法の検討(追跡・検出,視覚情報処理,画像メディア処理・符号化,一般)
- 共感覚の可視化アート(画像検索,議題 : ビジョンとグラフィクスの融合およびCG一般)
- 古典油彩画の科学
- 共感覚の可視化アート
- P26 色と音のノンバーバルマッピングを用いた絵画と音楽のインタラクション(ポスターセッション,第38回全国大会要旨集)
- O66 古典油彩画における構造発色とそのレンダリング手法の研究(測色・色彩情報,口頭発表,第38回全国大会要旨集)
- Sumi-Nagashi : 作家の感性を刺激する触感を持つ絵の具によるデジタル作画ツール(メディアアート, インタラクション: 技術と展開)
- D-12-17 移動カメラ画像からの手振り動きの検出と認識モデルの構築(D-12.パターン認識・メディア理解,一般セッション)
- 移動カメラ動画像からのCondensation Algorithmを用いた手振り認識の検討(テーマ関連セッション1)
- D-12-7 移動カメラ画像からの人物追従局所座標による手振り軌跡の検出法(D-12. パターン認識・メディア理解,一般セッション)
- 移動カメラ動画像からのCondensation Algorithmを用いた手振り認識の検討(テーマ関連セッション1,三次元画像,多視点画像)
- 移動カメラ動画像からのCondensation Algorithmを用いた手振り認識の検討(テーマ関連セッション1,三次元画像,多視点画像)
- H-008 動的カメラ画像からの動物体追跡のためのロボットプラットフォームの検討(H分野:画像認識・メディア理解)
- パン・ティルト・カメラにより獲得される動画像からのカメラの回転パラメータの推定法に関する検討 : 動物体を含む撮像シーンからのロバストな推定法の検討(追跡・検出,視覚情報処理,画像メディア処理・符号化,一般)
- O-028 視覚次元互動システム : 対話的な展示支援システムに関する提案(O.情報システム)
- サイバーシアターにおいて多数の観客アバターが存在する場合の演技者と観客との間の観客効果に関する基礎的検討(複合現実感,仮想都市)
- A-16-19 形状変形とテクスチャ張り替えを用いた3次元人物顔再構築法(A-16. マルチメディア・仮想環境基礎)
- ネットワークシアタ : 仮想環境とコンピュータネットワークによるコンテンツ作成システム
- A-14-6 ネットワークシアタ
- 2枚の実写画像による顔面筋動作を考慮した3次元顔特徴モデルの構築法
- 2枚の実写画像による顔面筋動作を考慮した3次元顔特徴モデルの構築法
- 2枚の実写画像による顔面筋動作を考慮した3次元顔特徴モデルの構築法
- A-16-35 筋肉動作を考慮した3次元顔モデルの構築と表現生成の応用
- D-11-75 3D顔モデル生成方法の比較検討
- 線画映像を用いてプライバシー保護に配慮したビジュアルサポートシステム
- 5Y-2 自動会話システムにおけるフォントによる感情表現の効果(コミュニケーション支援,学生セッション,インタフェース)
- I-037 テクスチャマッピング制御による立体感強調の基礎的検討(I分野:グラフィクス・画像,一般論文)
- 文化財環境における遍在型デジタルアーカイブ研究 : 非接触型ICチップ/タグを利用した、文化財環境でのユビキタス・アーカイブの実現について
- K-30 Field Augmented Reality実現のための絶対位置・方位測定方法の検討(マルチメディア・仮想環境基礎1,K.ヒューマンコミュニケーション&インタラクション)
- モンテカルロ法とベイズ推定に基づく動的カメラからの三次元形状復元を利用したカメラの移動方向評価尺度に関する検討(一般セッション9)
- D-12-36 移動カメラ画像からの3次元物体形状復元におけるカメラの移動方向評価尺度に関する検討(D-12. パターン認識・メディア理解,一般セッション)
- モンテカルロ法とベイズ推定に基づく動的カメラからの三次元形状復元を利用したカメラの移動方向評価尺度に関する検討(一般セッション3,三次元画像,多視点画像)
- モンテカルロ法とベイズ推定に基づく動的カメラからの三次元形状復元を利用したカメラの移動方向評価尺度に関する検討(一般セッション3,三次元画像,多視点画像)
- H-056 カメラの上下動を考慮するモンテカルロ法とベイズ推定に基づく物体の三次元形状復元法の検討(H分野:画像認識・メディア理解)
- D-12-57 移動カメラを用いるベイズ更新に基づく逐次的3次元形状復元法の検討 : 特徴点の追跡が不要な方法の提案と基礎的検討(D-12.パターン認識・メディア理解,一般講演)
- K-029 サイバーシアターの空間移動ディレクション装置の提案(K分野:ヒューマンコミュニケーション&インタラクション)
- 1ZG-6 "●"プロンプタを用いるコミュニケーションシステムにおけるメッセージ表現の分析(コミュニケーション支援,学生セッション,インタフェース,情報処理学会創立50周年記念)
- 5Y-3 "●"プロンプタを用いるコミュニケーションシステムにおける表現特性の分析(コミュニケーション支援,学生セッション,インタフェース)
- ICME2001, マルチメディアに関する国際会議と展示
- H-030 テンソル分解に基づく多視点映像を用いた人物の動作認識の一検討(H分野:画像認識・メディア理解,一般論文)
- A-14-12 顔の特徴を分類化および言語表現可能とした似顔絵システム : デフォルメ似顔絵自動生成システム:ACGS(A-14. ヒューマンコミュニケーション基礎,一般セッション)
- J-005 顔認識における二重符号化理論とデフォルメ似顔絵との関連性について : コンピュータによる似顔絵生成への応用(J分野:ヒューマンコミュニケーション&インタラクション)
- A-14-10 分析的記憶表象領域における顔記憶の階層的構造とそのコンピュータシミュレーション : デフォルメ似顔絵自動生成システムへの応用(A-14.ヒューマンコミュニケーション基礎,一般講演)
- K_008 分析的記憶表象領域における顔記憶の階層的構造とそのコンピュータシミュレーション : デフォルメ似顔絵自動生成システムへの応用(K分野:ヒューマンコミュニケーション&インタラクション)
- 顔の特徴を分類化および言語表現可能とした似顔絵システムの検討(メディア処理・コンテンツ生成,ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- A-15-4 顔の特徴を分類化および言語表現可能とした似顔絵システムの提案(A-15.ヒューマン情報処理,一般講演)
- K-065 顔認識における二重符号化理論とデフォルメ似顔絵との関連性について : コンピュータによる似顔絵生成への応用(K分野:ヒューマンコミュニケーション&インタラクション)
- Proactive Desk の実装と応用 : 流れる絵画「Sumi-Nagashi」の体験
- フェルメールの"牛乳を注ぐ女"の秘密を解く(画像色彩研究会第5回アート&サイエンスセミナー)
- I-056 複数カメラを用いたMotion Signatureに基づく人物のトラッキングの検討(グラフィクス・画像,一般論文)
- テンソル分解に基づく人物の歩行動作を用いた個人認証(一般セッション2,移動カメラ画像処理におけるパターン認識とメディア理解)
- H-043 シルエット特徴量のテンソル分解に基づく動画像から人物の動作認識手法の検討(画像認識・メディア理解,一般論文)
- 互いに類似した動作のテンソル分解に基づく動画像からの認識法の検討(センサネットワーク,Webにおける映像メディア処理,応用及び一般)
- 互いに類似した動作のテンソル分解に基づく動画像からの認識法の検討(センサネットワーク,Webにおける映像メディア処理,応用及び一般)
- O-009 画像処理を用いた店舗内の顧客の商品選定時における態度の認識手法の一考察(O分野:情報システム)
- D-12-123 観察法に基づく画像処理を用いた顧客の行動認識手法の一考察(D-12.パターン認識・メディア理解,一般講演)
- 伸縮を含む対話的変形操作が可能な多関節三次元弾性物体モデル(サイバーワールド論文)
- J_019 多関節弾性物体モデルのための計算コストと使用メモリ削減法の検討(J分野:グラフィクス・画像)
- 店舗内における顧客の行動認識方法の基礎的検討 : 人物の介入するフレームの検出と色情報を用いた人物と物体との接触確認(映像符号化,システム及び一般)
- D-12-126 弾性物体のように振舞うキャラクターモデルの構築法(D-12.パターン認識・メディア理解,一般講演)
- 油彩画の透層をシミュレートするグラフィックシステム
- 映像の身体 (シンポジウム 人間のからだをどうとらえるか--私にとっての美術解剖学)
- 複数弾性物体を用いた対話操作が可能な弾性物体キャラクターモデルの構築法の提案(CG一般(3):人物の認識と表現, テーマ:CGと教育,およびCG一般)
- 2段階境界要素法を用いる三次元弾性物体の変形と移動の実時間アニメーション法(コンピュータグラフィックス)
- 多関節化による弾性物体のインタラクティブモデルの提案(ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- D-11-120 3次元弾性物体の頂点補間を用いた境界要素法による実時間アニメーションモデルの基礎的検討(D-11.画像工学D)
- 衝突を伴う仮想弾性物体のリアルタイムアニメーションモデルの提案 : 境界要素法モデルと実写挙動の再現(エンターテイメントと仮想環境,一般)
- 衝突を伴う仮想弾性物体のリアルタイムアニメーションモデルの提案 : 境界要素法モデルと実写挙動の再現
- D-11-81 中世テンペラ絵画の色彩復元を重視するディジタル表示法の基礎的検討(D-11.画像工学D)
- 熱転写記録を用いた金色銀色表現法とその用応
- 熱転写記録を用いた金色銀色表現法とその応用
- 熱転写記録を用いた金色銀色表現法とその応用(エレクトログラフィ特別研究会(紙面とディスプレイ画面に関わる先端技術動向))
- D-12-105 店舗内での顧客の行動を認識するための色情報を用いた物体の存在確認手法の基礎的検討(D-12.パターン認識・メディア理解,一般講演)
- O-007 画像処理を用いた店舗内の顧客の行動認識法に関する基礎的検討(O分野:情報システム)
- K-028 関節構造を持つ3次元弾性物体モデルの提案(K分野:ヒューマンコミュニケーション&インタラクション)
- D-12-77 逆運動学による弾性物体の多関節モデルの検討(D-12. パターン認識・メディア理解, 情報・システム2)
- ソフト・ハードエッジに着目したコンピュータによる絵画制作とその評価(映像符号化・システム・感性工学及び一般)
- D-12-83 テンソル分解に基づく任意の視点からの人物の動作認識手法の検討(D-12.パターン認識・メディア理解,一般セッション)
- テンソル分解に基づく多視点映像を用いた人物の動作認識手法の検討(一般セッション,映像処理とTRECVID)
- Shape from Shadingと遺伝的アルゴリズムを用いた水面形状推定法の基礎的検討(ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- D-12-4 Shape from Shadingと遺伝的アルゴリズムを用いた水面形状推定法の基礎的検討(D-12. パターン認識・メディア理解, 情報・システム2)
- A-16-5 抽象絵画における鑑賞者の視線行動解析と音楽作曲への応用に関する提案(A-16.マルチメディア・仮想環境基礎,一般セッション)
- ソフト・ハードエッジに着目したコンピュータによる絵画制作とその評価
- 古典油彩画グレーズ技法シミュレーションの高速化
- J-036 抽象絵画における鑑賞者の視線行動解析と自動音楽作曲への応用に関する基礎的検討(HIP(1),J分野:ヒューマンコミュニケーション&インタラクション)
- 抽象絵画における鑑賞者の視線行動を利用した音楽作曲の検討
- E-024 抽象絵画における鑑賞者の視線行動を利用した自動作曲に関する研究 : 視線行動パターンから和声的な音楽の生成方法に関する基礎的検討(E分野:自然言語・音声・音楽)