調理コンテンツの自動作成のためのレシピテキストと調理観測映像の対応付け(画像・映像処理)
スポンサーリンク
概要
- 論文の詳細を見る
調理コンテンツの自動作成のため,レシピ中に現れる食材名や調理操作名を,その調理を収録した映像のセグメントに対応づける研究について述べる.レシピでは調理手順が半順序でしか指定されない場合が多いが,調理観測データでは調理イベントが全順序で発生する.そこで両データを,各食材がどの順番で調理操作を加えられ,どの食材と混ぜられたかを表したトリー形式の記述に変換し,その二つのトリーをノードレベルで対応づけることを考える.ここでまず,調理操作は5分類,食材は6色で判別すれば,レシピにおける72.9%の調理操作と79.5%の食材の認識が可能であることを明らかにする.次に,トリーを対応づける際,映像処理におけるイベントの誤検出や誤認識,レシピにおける手順指定のあいまいさを編集距離により評価することにより,トリー全体として最適な対応付けを行う手法を提案する.最後に,実際に調理を行う様子を可視光及び赤外線カメラにより観測したデータに本手法を適応することにより有効性を検証する.
- 社団法人電子情報通信学会の論文
- 2007-10-01
著者
-
山肩 洋子
独立行政法人情報通信研究機構ユニバーサルメディア研究センター
-
美濃 導彦
京大
-
角所 考
関西学院大学理工学部人間システム工学科
-
山肩 洋子
情報通信研究機構
-
山肩 洋子
京大
-
角所 考
京都大学情報学研究科
-
美濃 導彦
京都大学情報学研究科
関連論文
- e-learningにおける学習者の顔動作観測に基づく主観的難易度の推定(教育工学)
- 物体領域抽出のための画素の構造を考慮した背景画像推定(画像)
- 複数視点画像からのテクスチャマッピングにおける模様の整合性の保存(幾何学的解析・最適化,画像の認識・理解論文)
- 3.料理を作る(生活に役立つメディア処理-料理行動を科学する-)
- 複数視点画像と事例画像を用いた超解像度テクスチャマッピング(一般セッション,実世界センシングとその応用)
- 3Dモデル形状の局所的な特徴によるアフィン不変な電子透かし埋め込む手法(セッション1:データハイディング,議題:CGと文化・芸術及びCG一般)
- 非剛体物体の形状変化と運動変化の主成分分析に基づくパーティクルフィルタの効率化(追跡・位置合わせ,第12回画像の認識・理解シンポジウム推薦論文,画像の認識・理解論文)
- カメラ映像におけるプライバシ対処のためのアプローチ(センシングウェブ)
- D-12-107 複数視点画像と事例画像を用いた超解像度テクスチャマッピング(D-12.パターン認識・メディア理解B(コンピュータビジョンとコンピュータグラフィックス),一般セッション)
- FECとPath-Diversityを利用した回復可能なストリーミング(セッション4 : マルチメディア通信とその応用)
- 可変通信速度PSK変復調器を利用したVSAT局間コンピュータネットワーク基礎実験
- ネットワーク仮想記憶を利用した連続メディアの伝送方式
- 教育のための情報基盤の構築を目指して : 教育学習支援情報システム(Course Management System)研究グループ(研究会千夜一夜)
- 仮想服飾環境PARTY : 衣服形状計算における,衣服と人体との衝突計算方法
- 制約充足型画像処理
- デジタルシティにおけるコミュニケーション
- 複数視点画像からのテクスチャマッピングにおける模様の整合性の保存(一般セッション1,移動カメラ画像処理におけるパターン認識とメディア理解)
- 3次元人体モデル中心処理
- ヒト胎児時空間4次元モデルの構築と胎児標本3次元画像との並列表示(一般セッション, 産業応用とパターン認識・メディア理解)
- 分散型機能協調基盤による機能連携サービス提供方法(モバイル,コンテンツ,セキュリティ,信頼性,一般)
- 指向性スピーカと波面合成法を用いた近接三次元音場再生システムの音源探査による実環境評価
- 波面合成法を用いた近接三次元音場再生のシステム試作
- あなたは人の計測にCV技術を使いますか?
- 高等教育機関における次世代コース管理システムの構築に向けて(学習オブジェクト・学習データの活用と集約)
- 学習現場におけるアンビエントなコミュニケーション支援のための人物行動観測
- バーチャルスタジオにおける現実物体を介した仮想物体操作
- A-16-5 バーチャルスタジオにおける現実物体を介した仮想液体操作(A-16.マルチメディア・仮想環境基礎,一般セッション)
- A-16-3 音と映像の統合による調理における切断加工開始の検出(A-16.マルチメディア・仮想環境基礎,一般セッション)
- D-12-100 チンダル現象を利用した物体表面の三次元位置及び法線推定(D-12.パターン認識・メディア理解B(コンピュータビジョンとコンピュータグラフィックス),一般セッション)
- D-15-27 講義アーカイブ映像視聴時における視聴者の能動的注目行動の獲得(D-15. 教育工学,一般セッション)
- 教育・学習における遠隔協同作業支援
- 講師追跡撮影カメラと平面対象撮影カメラを併用した講義室の高解像度画像合成(画像・映像処理)
- 映像からの運動モデル獲得によるボールの未観測運動推定(画像認識,コンピュータビジョン)
- 欠損および過抽出を含む時系列シルエットからの三次元形状獲得(一般セッション2)
- 欠損および過抽出を含む時系列シルエットからの三次元形状獲得(一般セッション2,CV/PR技術のVRへの応用)
- ランダムパターン背景を用いた視体積交差法のためのシルエット欠損修復(画像認識,コンピュータビジョン)
- D-12-55 物体形状に関する性質の利用による視体積交差法における線状部分の欠損の修復手法(D-12.パターン認識・メディア理解,一般講演)
- D-15-39 Wikiによる研究活動支援のための利用履歴の解析(D-15.教育工学,一般講演)
- D-12-133 ランダムパターン背景を用いた視体積交差法のためのシルエット修復手法(D-12. パターン認識・メディア理解, 情報・システム2)
- 画像特徴に基づくイメージモザイキング (知能情報メディア論文特集)
- ホームネットワークサービス向けサービスシナリオ記述フレームワークのエミュレータ開発(NW性能管理, NW品質, 一般)
- 機能協調基盤ゆかりカーネルにおけるアクセス制御と振舞記述(「モバイルNWとインターネット/家電NWはどう融合するか?」【標準化(DLNA等), モバイルNW, 家電NW, 情報家電, 及び一般】)
- ネットワーク家電のための機能協調型基盤ゆかりカーネル構想
- 機能協調型基盤ゆかりコアを用いた実生活支援サービス : NICTユビキタスホームへの展開と実装(システム・アプリケーション)
- 機能協調型家電ネットワーク基盤"ゆかりコア"おける環境適応型機能バインド機構
- 機能協調型家電ネットワークのためのサービスシナリオ記述方式(ミドルウェア・組込み)
- ゆかりコア : ネットワーク家電のための分散協調型サービス構築基盤
- バーチャルスタジオ撮影における実演での3次元仮想物体提示のための適応的レジストレーション
- 映像処理評価用映像データベースについて
- DP-1-3 センサー情報を社会的に共有するためのプライバシー処理とその実証実験(DP-1.ユビキタスロボットの実証実験の課題,パネルセッション,ソサイエティ企画)
- 画像識別のための直線不変量ヒストグラムマッチング法(画像処理・解析, 画像の認識・理解論文)
- D-15-37 非対称・可換型遠隔講義システムの評価(D-15.教育工学,一般講演)
- 映像シーンを用いた授業要約作成システムを活用した大学授業の実践と評価(教育実践研究論文,学習・教育支援のための技術開発)
- バーチャルスタジオにおける演者と仮想物体のインタラクションのための適応的レジストレーション(ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- 実計測データを使用した姿勢変化に対する肩関節の形状表現
- 食材に視覚的特徴変化を生じさせる加工における食材と加工動作の同時認識(画像・映像処理)
- 歩行時の両足床反力を用いた個人識別(パターン認識)
- D-12-27 個人識別のためのフットステップ情報利用の検討(D-12. パターン認識・メディア理解, 情報・システム2)
- 頭部・視線の動きに基づくアドバイスへのユーザの依存度推定手法(料理メディア,ヒューマンコミュニケーション〜人間中心の情報環境構築のための要素技術〜論文)
- 視覚障害者向け調理支援システムの検討(生活メディア(2):料理,日常生活におけるメディア技術)
- 画像識別のための直線不変量ヒストグラムマッチング法(一般セッション(3))(ユビキタスコンピューティングのためのパターン認識・メディア理解,一般)
- 料理映像コミュニケーション基盤ソフトウェアIwaCamを用いた遠隔共同料理実験(生活メディア(2):料理,日常生活におけるメディア技術)
- 頭部・視線の動きに基づくアドバイスへのユーザの依存度推定手法(テーマ関連,顔・人物・ジェスチャ・行動)
- 頭部・視線の動きに基づくアドバイスへのユーザの依存度推定手法(テーマ関連,顔・人物・ジェスチャ・行動)
- 10-104 京都大学OCW : オープンエデュケーションがもたらすもの(オーガナイズドセッション「オープンコースウエアとその活用」-I,口頭発表論文)
- 逐次的ファジークラスタ抽出法とそのノイズに対するロバスト性
- 全文検索可能な文書画像データベースシステムの構築
- 首振りカメラによる板書文字記録システム
- 音声情報を用いた講義の構造理解と話題の類似度検出
- 高速な大規模マルチテンプレート手書き文字認識
- PLS: ポリモーフィック・ラーニング・スペースの構想
- 調理者の手の動きを時空間制約とした調理中の食材追跡(料理メディア研究会特別セッション)
- Smart Kitchen Project--調理者の調理を妨げない支援のための調理行動認識に向けて
- 調理コンテンツの自動作成のためのレシピテキストと調理観測映像の対応付け(画像・映像処理)
- D-12-136 食材追跡のためのボウルの位置及び傾き推定(D-12.パターン認識・メディア理解,一般講演)
- D-12-135 調理状況認識を目的とした食材追跡の仮説の生成(D-12.パターン認識・メディア理解,一般講演)
- 異なる放射特性を持つ球形スピーカによる再生音場の数値解析 : 音源探査による演奏者の音像の大きさと形の推定(立体音響,一般)
- 球形スピーカによる異なる放射特性を持つ音響表現の実現(音場制御/一般)
- 波面合成法を用いた近接三次元音場再生の理論的研究(音場制御/一般)
- 少数のスピーカと波面合成法を用いた三次元音場再生システムの提案及び性能評価(音場制御/一般)
- 球形スピーカーアレイ音響装置による超臨場感音響に関する考察(スペシャルセッション : 究極の超臨場感 (2))
- 聴覚情報評価のための多チャンネル音響システムの提案と実装(セッション2-A : コミュニケーション・グループ通信・協調作業支援(2))
- 聴覚情報評価のための多チャンネル音響システムの提案と実装(セッション2-A : コミュニケーション・グループ通信・協調作業支援(2))
- 30年後に垣間見える高次元の世界
- ユーザの性格に応じた調理アドバイス文章の選択(メディアと表現,産学連携論文)
- 調理における中間食材に対する呼称の解釈法の提案(インタフェース,入出力,その他)
- 調理における中間食材に対する呼称の解釈法の提案(HAIにおけるコミュニケーションとインタラクション適応)
- 調理における中間食材に対する呼称の解釈法の提案
- ユーザの性格に応じた気に入ってもらえる調理アドバイスの構成(ヒューマンコミュニケーショングループ(HCG)シンポジウム)
- D-12-75 適応的背景変更による食材の領域と色の抽出(D-12.パターン認識・メディア理解,一般講演)
- D-12-74 調理加工に起因する振動音を用いた食材識別(D-12.パターン認識・メディア理解,一般講演)
- D-12-73 テクスチャに基づく食材識別の検討(D-12.パターン認識・メディア理解,一般講演)
- A-16-5 音声による調理法教示のための対象食材の呼称の決定(A-16.マルチメディア・仮想環境基礎,一般講演)
- 調理における中間食材に対する呼称の解釈法の提案 (HAI(Human Agent Interaction)シンポジウム(HAI-2006) 研究会オーガナイズドセッション) -- (インタフェース,入出力,その他)
- アシスタントエージェントとの音声対話による調理コンテンツの自動生成(映画処理・映像コンテンツ, 仮想環境の生成と活用)
- 把持の順序と外見の変化モデルを利用した調理作業における食材追跡(画像特徴抽出・追跡,料理を取り巻く情報メディア技術論文)
- 呼称により指示された中間食材を同定するための画像認識モデル及び呼称解釈法の提案(画像認識,料理を取り巻く情報メディア技術論文)
- 調理における切断加工時の荷重特徴を用いた食材認識(五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- 調理における切断加工時の荷重特徴を用いた食材認識(五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- IwaCamを用いたメディア処理による遠隔コミュニケーションの支援 : 同時調理を題材とした映像と音声の役割に関する考察 (データ工学)