アシスタントエージェントとの音声対話による調理コンテンツの自動生成(映画処理・映像コンテンツ, 仮想環境の生成と活用)
スポンサーリンク
概要
- 論文の詳細を見る
調理者の調理を知的に支援するスマートキッチンの研究を通じて, 調理観測機能や音声対話機能を持つキッチンシステムを構築した.本稿ではこのキッチンシステムを用いて, 一般の調理者が自分の考案したレシピのマルチメディアコンテンツを作成するというタスクにおいて, (i)カメラやマイクにより調理者の調理行動を認識し, レシピに基づき調理進行を把握し, (ii)アシスタントエージェントが調理者と音声対話することにより言語的な情報を追加して, (iii)レシピに対し冗長な映像部分を削除編集して, 視聴者に分かりやすいマルチメディアコンテンツを自動生成するための枠組みと, 作成したコンテンツに対する考察について述べる.
- 社団法人電子情報通信学会の論文
- 2005-11-17
著者
-
美濃 導彦
京都大学学術情報メディアセンター
-
角所 考
京都大学学術情報メディアセンター
-
山肩 洋子
独立行政法人情報通信研究機構ユニバーサルメディア研究センター
-
美濃 導彦
京大
-
角所 考
関西学院大学理工学部人間システム工学科
-
正司 哲朗
京都大学学術情報メディアセンター
-
正司 哲朗
京都大学大学院情報学研究科
-
山肩 洋子
京都大学情報学研究科知能情報学専攻
関連論文
- e-learningにおける学習者の顔動作観測に基づく主観的難易度の推定(教育工学)
- 物体領域抽出のための画素の構造を考慮した背景画像推定(画像)
- 複数視点画像からのテクスチャマッピングにおける模様の整合性の保存(幾何学的解析・最適化,画像の認識・理解論文)
- 3.料理を作る(生活に役立つメディア処理-料理行動を科学する-)
- 複数視点画像と事例画像を用いた超解像度テクスチャマッピング(一般セッション,実世界センシングとその応用)
- 3Dモデル形状の局所的な特徴によるアフィン不変な電子透かし埋め込む手法(セッション1:データハイディング,議題:CGと文化・芸術及びCG一般)
- 非剛体物体の形状変化と運動変化の主成分分析に基づくパーティクルフィルタの効率化(追跡・位置合わせ,第12回画像の認識・理解シンポジウム推薦論文,画像の認識・理解論文)
- カメラ映像におけるプライバシ対処のためのアプローチ(センシングウェブ)
- D-12-107 複数視点画像と事例画像を用いた超解像度テクスチャマッピング(D-12.パターン認識・メディア理解B(コンピュータビジョンとコンピュータグラフィックス),一般セッション)
- FECとPath-Diversityを利用した回復可能なストリーミング(セッション4 : マルチメディア通信とその応用)
- 可変通信速度PSK変復調器を利用したVSAT局間コンピュータネットワーク基礎実験
- 教育のための情報基盤の構築を目指して : 教育学習支援情報システム(Course Management System)研究グループ(研究会千夜一夜)
- 複数視点画像からのテクスチャマッピングにおける模様の整合性の保存(一般セッション1,移動カメラ画像処理におけるパターン認識とメディア理解)
- 3次元人体モデル中心処理
- ヒト胎児時空間4次元モデルの構築と胎児標本3次元画像との並列表示(一般セッション, 産業応用とパターン認識・メディア理解)
- 分散型機能協調基盤による機能連携サービス提供方法(モバイル,コンテンツ,セキュリティ,信頼性,一般)
- 高等教育機関における次世代コース管理システムの構築に向けて(学習オブジェクト・学習データの活用と集約)
- e-learning における学習者の顔動作観測に基づく主観的難易度の推定
- 学習現場におけるアンビエントなコミュニケーション支援のための人物行動観測
- バーチャルスタジオにおける現実物体を介した仮想物体操作
- A-16-5 バーチャルスタジオにおける現実物体を介した仮想液体操作(A-16.マルチメディア・仮想環境基礎,一般セッション)
- A-16-3 音と映像の統合による調理における切断加工開始の検出(A-16.マルチメディア・仮想環境基礎,一般セッション)
- D-12-100 チンダル現象を利用した物体表面の三次元位置及び法線推定(D-12.パターン認識・メディア理解B(コンピュータビジョンとコンピュータグラフィックス),一般セッション)
- D-15-27 講義アーカイブ映像視聴時における視聴者の能動的注目行動の獲得(D-15. 教育工学,一般セッション)
- 教育・学習における遠隔協同作業支援
- 講師追跡撮影カメラと平面対象撮影カメラを併用した講義室の高解像度画像合成(画像・映像処理)
- 映像からの運動モデル獲得によるボールの未観測運動推定(画像認識,コンピュータビジョン)
- 欠損および過抽出を含む時系列シルエットからの三次元形状獲得(一般セッション2)
- 欠損および過抽出を含む時系列シルエットからの三次元形状獲得(一般セッション2,CV/PR技術のVRへの応用)
- ランダムパターン背景を用いた視体積交差法のためのシルエット欠損修復(画像認識,コンピュータビジョン)
- D-12-55 物体形状に関する性質の利用による視体積交差法における線状部分の欠損の修復手法(D-12.パターン認識・メディア理解,一般講演)
- 視体積交差法における時系列画像の統合による三次元復元形状の再現性の向上(三次元形状, 画像の認識・理解論文)
- D-12-133 ランダムパターン背景を用いた視体積交差法のためのシルエット修復手法(D-12. パターン認識・メディア理解, 情報・システム2)
- ホームネットワークサービス向けサービスシナリオ記述フレームワークのエミュレータ開発(NW性能管理, NW品質, 一般)
- 機能協調基盤ゆかりカーネルにおけるアクセス制御と振舞記述(「モバイルNWとインターネット/家電NWはどう融合するか?」【標準化(DLNA等), モバイルNW, 家電NW, 情報家電, 及び一般】)
- 機能協調型家電ネットワーク基盤"ゆかりコア"おける環境適応型機能バインド機構
- 機能協調型家電ネットワークのためのサービスシナリオ記述方式(ミドルウェア・組込み)
- ゆかりコア : ネットワーク家電のための分散協調型サービス構築基盤
- バーチャルスタジオ撮影における実演での3次元仮想物体提示のための適応的レジストレーション
- 頭部・視線の動きに基づくアドバイスへのユーザの依存度推定手法 (ヒューマン情報処理)
- 頭部・視線の動きに基づくアドバイスへのユーザの依存度推定手法 (パターン認識・メディア理解)
- 映像処理評価用映像データベースについて
- 分散協調視覚プロジェクト : 分散協調視覚研究、システム開発の概要
- DP-1-3 センサー情報を社会的に共有するためのプライバシー処理とその実証実験(DP-1.ユビキタスロボットの実証実験の課題,パネルセッション,ソサイエティ企画)
- 画像識別のための直線不変量ヒストグラムマッチング法(画像処理・解析, 画像の認識・理解論文)
- D-15-37 非対称・可換型遠隔講義システムの評価(D-15.教育工学,一般講演)
- 映像シーンを用いた授業要約作成システムを活用した大学授業の実践と評価(教育実践研究論文,学習・教育支援のための技術開発)
- 食材に視覚的特徴変化を生じさせる加工における食材と加工動作の同時認識(画像・映像処理)
- 歩行時の両足床反力を用いた個人識別(パターン認識)
- D-12-27 個人識別のためのフットステップ情報利用の検討(D-12. パターン認識・メディア理解, 情報・システム2)
- 頭部・視線の動きに基づくアドバイスへのユーザの依存度推定手法(料理メディア,ヒューマンコミュニケーション〜人間中心の情報環境構築のための要素技術〜論文)
- 画像識別のための直線不変量ヒストグラムマッチング法(一般セッション(3))(ユビキタスコンピューティングのためのパターン認識・メディア理解,一般)
- 頭部・視線の動きに基づくアドバイスへのユーザの依存度推定手法(テーマ関連,顔・人物・ジェスチャ・行動)
- 頭部・視線の動きに基づくアドバイスへのユーザの依存度推定手法(テーマ関連,顔・人物・ジェスチャ・行動)
- 10-104 京都大学OCW : オープンエデュケーションがもたらすもの(オーガナイズドセッション「オープンコースウエアとその活用」-I,口頭発表論文)
- 書式のない文書画像からの文字パターン列の抽出
- D-9-11 メッセージ受信メディアの動的選択システム
- テクスチャと色の相補的な利用に基づく調理作業中の台上物体領域抽出(生活メディア(2):料理,日常生活におけるメディア技術)
- バーチャルスタジオにおける仮想物体把持を支援する視聴覚情報の提示(テーマ関連,顔・人物・ジェスチャ・行動)
- 姿勢事例の獲得とその補完による手の計測形状の姿勢操作(テーマ関連,顔・人物・ジェスチャ・行動)
- バーチャルスタジオにおける仮想物体把持を支援する視聴覚情報の提示(テーマ関連,顔・人物・ジェスチャ・行動)
- 姿勢事例の獲得とその補完による手の計測形状の姿勢操作(テーマ関連,顔・人物・ジェスチャ・行動)
- バーチャルスタジオにおける現実物体を介した仮想物体操作
- 6)ATMネットワークを用いた遠隔講義システム構成法の検討(ネットワーク映像メディア研究会)
- 映像からのモデル獲得による球状物体の未観測運動推定(マルチメディア仮想環境基礎,及び一般,HCGシンポジウム)
- A-16-11 運動法則に基づいた映像からの運動モデリング(A-16.マルチメディア・仮想環境基礎,一般講演)
- D-12-101 仮想物体操作における合成映像での時間的連続性の実現(D-12. パターン認識・メディア理解,一般セッション)
- D-15-6 講義時における講師・受講者の行動に基づく時系列コンテキストの獲得(D-15. 教育工学,一般セッション)
- 調理者の手の動きを時空間制約とした調理中の食材追跡(料理メディア研究会特別セッション)
- 調理アドバイスの適切なタイミングでの音声提示に利用可能な調理状況の選定(料理メディア研究会特別セッション)
- 講師行動の統計的性質に基づいた講義撮影のための講義状況の認識(パターン認識)
- 光切断法による複数運動剛体の形状計測(幾何解析と形状復元,画像の認識・理解論文)
- 講義における教材中の指示対象の抽出(パターン認識)
- D-12-136 食材追跡のためのボウルの位置及び傾き推定(D-12.パターン認識・メディア理解,一般講演)
- D-12-135 調理状況認識を目的とした食材追跡の仮説の生成(D-12.パターン認識・メディア理解,一般講演)
- D-12-22 照度差ステレオと影を利用した奥行きエッジが存在する物体の形状計測手法(D-12.パターン認識・メディア理解,一般講演)
- さまざまな姿勢での光切断法による三次元人体形状モデリング(D論セッション2)
- 17-1 リズム情報に基づいた映像の同期合成
- 4M-2 Image Wave : イメージの同期に関する研究
- クラスタリングを用いた人体点群データからの表面再構成(コンピュータグラフィックス(CG))
- クラスタリングを用いた人体点群データからの表面再構成(マルチメディア,仮想環境及び一般)
- 現実物体操作の逐次観測による柔軟物体モデルの漸進的パラメータ推定(コンピュータグラフィックス)
- インターネット有料ライブ放送における指紋符号と暗号の統合
- ホームネットワークに適した単機能分散型ネットワークドアプライアンスアーキテクチャ(ネットワークサービス)
- ヒト胎児時空間4次元モデルの構築と胎児標本3次元画像との並列表示(一般セッション, 産業応用とパターン認識・メディア理解)
- 時空間4次元ヒト胚子モデル表示システムにおける視点選択の自動化手法の検討
- 3X-2 空間コード化法を用いた偽形状検出に基づく複数剛体の形状計測(3次元画像処理・認識,学生セッション,人工知能と認知科学,情報処理学会創立50周年記念)
- TexCut : GraphCutを用いたテクスチャの比較による背景差分の検討(一般セッション,Computational Photography)
- 現実物体操作の逐次観測にもとづく柔軟物体モデルの漸進的なパラメタ推定(人工現実感)
- 現実物体の観測に基づく線状柔軟物体の操作時の形状のモデル化(インタラクション技術の革新と実用化)
- 物体表面反射特性推定のためのチンダル現象を用いたレーザ光反射シミュレーション(テーマセッション,Computational Photography)
- M-053 家庭内ユビキタス環境における探し物サービスに関する検討(M.ネットワーク・モバイルコンピューティング)
- 3.2-2 京大のTIDEプロジェクトについて(3.2 異文化間の遠隔教育交流におけるTV会議システム活用に関わる諸課題,3. 平成15年度SCSによる公開研究会,多文化共生社会における国際遠隔教育交流に関わる諸課題 : 共同研究成果・公開研究会実施報告書)
- 3.遠隔授業による異文化コラボレーション(異文化コラボレーション)
- 受講者撮影機能を持つ双方向コミュニケーション記録型講義自動アーカイブシステム(高等教育と情報)
- 京都大学での実践に基づく講義アーカイブの調査分析(ICTを用いた科学技術教育)
- A-16-13 グラフィックデザインミーティング映像に対するインデキシングのための操作認識(A-16. マルチメディア・仮想環境基礎)
- 教材中の指示対象を利用した講義コンテンツの作成(映画処理・映像コンテンツ, 仮想環境の生成と活用)
- 音声対話システムにおける物体指示のための信念ネットワークを用いた曖昧性の解消
- K-29 音声対話におけるオブジェクト同定のための曖昧性の解消(マルチメディア・仮想環境基礎1,K.ヒューマンコミュニケーション&インタラクション)