紙楽譜を用いた演奏メディアonNoteのためのマーカレス楽譜認識の提案
スポンサーリンク
概要
- 論文の詳細を見る
本稿では,紙楽譜を用いた演奏メディア onNote のためのマーカレス楽譜認識の評価実験の結果を報告する.我々は,カメラに対して紙の楽譜をかざし,動かすことで,その楽譜の種類や位置などに応じた音楽を演奏できるインタラクティブシステム onNote を開発している.システムの実装に向けて LLAH (Local Likely Arrangement Hashing) を応用し,マーカ等を添付しない紙楽譜に対して,種類や姿勢をリアルタイムに検出するための画像認識法を提案し,楽譜上でポインティングされた点と音との対応付けを可能にした.本稿では,システムの概要を述べると共に,この画像処理手法に関する評価実験として,楽譜の識別性,処理速度,カメラ位置のロバスト性に関する実験を行った.
- 2011-03-19
著者
-
筧 康明
慶應義塾大学
-
筧 康明
慶應義塾大学 環境情報学部
-
筧 康明
慶応義塾大学環境情報学部
-
筧 康明
慶應義塾大学環境情報学部
-
山本 祐介
慶應義塾大学大学院政策・メディア研究科
-
内山 英昭
フランス国立情報学自動制御研究所
-
筧 康明
慶応大
関連論文
- 交差点マーク付き地図と交差点データベースを用いた地理データマッチングに基づくGISデータのAR提示システム
- 可視光通信プロジェクタを用いた残像ディスプレイの基礎検討(三次元ディスプレイ,HCGシンポジウム)
- Tablescape Animation--手描きキャラクタと卓上オブジェクトを用いた即興的アニメーション制作環境 (「アート&エンタテインメント2」特集)
- 座長からの報告
- Bloxels:発光ブロック群による実体ボクセルディスプレイ : 積層によるブロック間の情報伝達(人工現実感、及び一般)
- Bloxels:発光ブロック群による実体ボクセルディスプレイ : 積層によるブロック間の情報伝達(人工現実感,及び一般)
- アルス・エレクトロニカフェスティバル2008に見るメディアアート最前線
- UlteriorScape--テーブル上にかざされたスクリーンへの映像重畳とその応用 (「テーブルトップ・インタラクション」特集)
- SURF特徴量とエッジマッチングに基づく変化検出(テーマセッション関連,一般物体認識・画像特徴量)
- 光源マーカを用いた可視光通信に基づく写真測量システム
- LLAHを用いた交差点マーク付き地図と交差点データベースのマッチングに基づくGISデータのAR提示システム(一般セッション,実世界センシングとその応用)
- 拡張現実感を用いたビリヤードの支援情報表示システム--自然特徴を用いたオンラインキャリブレーション
- Bloxels : 発光ブロック群による実体ボクセルディスプレイ : 積層によるブロック間の情報伝達
- 視界制御フィルムを用いた方向依存透明ディスプレイLumisight
- A-16-6 Lumisight ディスプレイを用いた透明パーティション
- 2F-2 個人間相互作用ダイナミクスの可視化表現(インタフェースデザイン,一般セッション,インタフェース)
- 天地問題を解消した対面協調作業支援システム(インタフェースデザイン, インタラクション: 技術と展開)
- LimpiDual Touchにおける両面タッチ入力の実験的検討(五感メディアの品質,仮想空間におけるコミュニケーションデザイン,一般)
- LimpiDual Touchにおける両面タッチ入力の実験的検討(五感メディアの品質,仮想空間におけるコミュニケーションデザイン,一般)
- ボールゲームにおける一対一しかけ評価指標の提案(論文・事例研究)
- 可視光通信プロジェクタと高速度カメラを用いたユビキタス情報環境の基礎検討(基礎/応用,サイバーワールド論文)
- 可視光通信プロジェクタを用いた3次元形状ディスプレイの基礎検討(マルチメディア仮想環境基礎,及び一般,HCGシンポジウム)
- SIGGRAPH2008参加報告
- interFORestプロジェクト : Discover ShiretokoキャンペーンにおけるWebと実世界をつなぐ試み(複合現実感,仮想都市,及び一般)
- 実世界指向Webアプリケーションの創出(ヒューマンコミュニケーション〜人間中心の情報環境構築のための要素技術〜論文)
- LimpiDual Touchの操作性に関する評価実験(評価実験,デジタルミュージアムとエンタテイメントメディア)
- 付箋とウェブを利用した展示感想共有システムの提案(デジタルミュージアム,デジタルミュージアムとエンタテイメントメディア)
- ミュージアムにおける鑑賞体験を反映した個人別リーフレットの提案(インタフェース,日常生活におけるメディア技術)
- ExFloasion : 多層空中像を用いた複合現実展示システム(デジタルミュージアム,デジタルミュージアムとエンタテイメントメディア)
- 川歩きの感覚を提示する長靴型触覚デバイスRiverBootsの提案(デバイス・手法,デジタルミュージアムとエンタテイメントメディア)
- 前面投影型方向依存ディスプレイの提案と複合現実展示への応用(デジタルミュージアム,デジタルミュージアムとエンタテイメントメディア)
- LimpiDual Touchの操作性に関する評価実験(第2報) : 入力位置に関する実験(複合現実感,仮想都市)
- Tablescape Animation : 手描きキャラクタと卓上オブジェクトを用いた即興的アニメーション制作環境
- フォトクロミック材料を用いた実世界指向インタフェースの基礎検討(インタフェース,日常生活におけるメディア技術)
- ARForce:Augmented Realityのための光学式多点力ベクトルセンサ
- Photonastic Surface : 光で制御する3次元形状ディスプレイ(三次元ディスプレイ,HCGシンポジウム)
- 可視光通信プロジェクタと高速度カメラを用いたユビキタス情報環境の基礎検討--映像中に隠された情報の可視化とその応用
- 匂い情報を手掛かりにしたライフログシステムにおけるイベント検出手法の基礎検討(人工現実感、及び一般)
- 匂い情報を手掛かりにしたライフログシステムにおけるイベント検出手法の基礎検討
- 匂い情報を手掛かりにしたライフログシステムにおけるイベント検出手法の基礎検討(人工現実感,及び一般)
- A-16-13 打ち方で文字修飾が変化するキーボードシステムの提案(A-16.マルチメディア・仮想環境基礎,一般セッション)
- 匂い情報をキーとする体験映像記録・閲覧システムの検討
- テーブル内蔵型ProCamシステムにおけるマーカ認識のための光学系の検討 : Tablescape Plusへの適用(テーマ関連セッション2)
- ウェブを介した鑑賞前・鑑賞中・鑑賞後をつなぐ展示支援システムの提案(デジタルミュージアム,デジタルミュージアムとエンタテイメントメディア)
- LK_009 赤外可視変換素材を用いた選択的情報提示に関する基礎検討(K分野:ヒューマンコミュニケーション&インタラクション)
- Lumisight Tableにおけるカメラと歪ゲージを併用した接触入力の基礎検討(ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- (211)協調作業支援システムLumisight Tableを用いた風力発電適地選定教育(セッション61 コンピュータ援用教育IV)
- インタラクティブな多人数用方向依存ディスプレイ Lumisight Table の光学設計
- 1ZN-7 Tablescape Animationにおけるキャラクタ制作ソフトウェアの開発(コンテンツ制作,学生セッション,コンピュータと人間社会,情報処理学会創立50周年記念)
- A-14-4 Metamor Photo Story : 写真と言葉をつなぐ多人数参加型ストーリー生成支援環境の検討(A-14.ヒューマンコミュニケーション基礎,一般セッション)
- ディスプレイの未来 : 実世界と情報の新たな接点
- IEEE Tabletops and Interactive Surfaces 2008 参加報告
- 1ZN-3 おりがみらいぶ : 折り紙のデジタルな演出の提案(コンテンツ制作,学生セッション,コンピュータと人間社会,情報処理学会創立50周年記念)
- UIST2007
- TableTop 2006
- 1ZN-8 物体の本物の影に動きを与えるディスプレイシステムの提案(コンテンツ制作,学生セッション,コンピュータと人間社会,情報処理学会創立50周年記念)
- 人物軌跡を利用した空間演出インタラクティブシステム i-trace
- 影の表現を通じたインタラクティブ拡張現実空間
- "メディアアート"が消える日 : エンジニアリングとアートの交差点より
- 座長からの報告
- Soltiluca:太陽光発電を用いたインタラクティブランドアートの提案
- ソラ・カラ -太陽光を活用した発色による空間演出-
- 紙楽譜を用いた演奏メディアonNoteのためのマーカレス楽譜認識の提案
- ラップトップPCの擬人化による対面コミュニケーション支援-ProsopoLaptopを用いた実験的検討-
- ボールゲームにおける一対一しかけ評価指標の提案
- 実世界指向Webアプリケーションの創出
- hanahana & hanahanahana : 香りの視覚化によるインタラクティブアート
- 1P1-I08 可動入力面を持つ光学式力ベクトル場センサの基礎検討(触覚と力覚)
- Tablescape Animation:手描きキャラクタと卓上オブジェクトを用いた即興的アニメーション制作環境(アート&エンタテインメント2)
- ソラ・カラ : 太陽光を活用した発色による空間演出(レンダリング,エンタテインメントのためのメディアとリアリティ)
- 補色を用いて自己の影を彩りある映像メディアにするマルチプロジェクションシステム(「メディアアートにおける『美』と『快』」特集)
- 紫外プロジェクタを用いた発色型映像投影(ディスプレイ,人工現実感)
- アート表現のためのシャボン膜を用いたタッチ入力可能な実体ディスプレイ(ハプティクスとVR)
- Tablescape Plus : インタラクティブな卓上映像シアター(「グラフィックスとアルゴリズム」特集)
- UlteriorScape: テーブル上にかざされたスクリーンへの映像重畳とその応用(テーブルトップ・インタラクション)
- 日常生活の匂い記録に向けたセンシングシステムの設計及び評価(教育・訓練・協調)
- Peaflet:ミュージアムにおける鑑賞体験を反映させた個人別リーフレット
- 1-2 ライフスキルの学習支援ツールの開発 : 身体と意識の共創様態の探究方法論(1.人間を科学する,人間を理解するためのICT技術-人間を対象としたセンシング・情報処理からその応用まで-)
- 座長からの報告
- ライフスキルの学習支援ツールの開発 : 身体と意識の共創様態の探究方法論
- ソラ・カラ : 太陽光を活用した屋外空間の発色制御
- SteganoScan & SteganoScan Orbs : 可視光通信プロジェクタを用いた空間拡張型ディスプレイ (特集論文 アートとヒューマンインタフェース)
- dePENd:ボールペンの強磁性を利用した手描き拡張システムの提案
- dePENd:ボールペンの強磁性を利用した手描き拡張システムの提案
- AtlasScape:紙とスマートフォンの接触による情報重畳の提案と展示支援への応用(インタフェース(2),五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- AtlasScape:紙とスマートフォンの接触による情報重畳の提案と展示支援への応用(インタフェース(2),五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- 空間への情報重畳のための方向依存web表示システムの基礎検討(インタフェース(2),五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- 空間への情報重畳のための方向依存web表示システムの基礎検討(インタフェース(2),五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- tamable looper : 磁力球群の移動・変形制御による生物的表現とインタラクション(アート&エンタテインメント3)
- ペタンコ麺棒 : バーチャルな物体を潰す感覚を表現する麺棒型インタフェース(アート&エンタテインメント3)
- COMP*PASS:実世界での図形のコピー&ペーストを可能にするコンパスの拡張
- COMP*PASS:実世界での図形のコピー&ペーストを可能にするコンパスの拡張
- (第9回) "メディアアート"が消える日 : エンジニアリングとアートの交差点より(メディアアート紀行)
- 4-6. ディスプレイの未来 : 実世界と情報の新たな接点(4. 若手研究者から見た映像情報メディアの未来,学会創立60周年記念 映像情報メディアの未来ビジョン)
- SteganoScan & SteganoScan Orbs : 可視光通信プロジェクタを用いた空間拡張型ディスプレイ
- AtlasScape : 紙とスマートフォンの接触による情報重畳の提案と展示支援への応用
- 空間への情報重畳のための方向依存 web 表示システムの基礎検討
- NeonDough : 導電性粘土を用いた光る粘土細工
- 空間への情報重畳のための方向依存 web 表示システムの基礎検討