顔検出・合成による衣服コーディネート等身大表示システム
スポンサーリンク
概要
- 論文の詳細を見る
本研究では,様々な衣服画像を前処理無しで擬似試着するシステムとして,大型ディスプレイを使った衣服コーディネート等身大表示システムを提案,実装した.このシステムは,過去の自分の服装や他人の服装にユーザの顔を合成しリアルタイムに等身大で表示することで,それらのコーディネートを追体験させることを目的としている.また,これらのシステムを実現するために顔合成の要素技術である Poisson Image Editing の画像シーケンス使用時の高速化,顔画像合成に特化した自然なマスクの高速作成法を提案した.これにより,リアルタイムでのシステムの稼働,よりリアルな追体験が可能となった.また,このシステムと合わせて服装を撮影するシステムを実装し,「変身」 をテーマとした美術館の企画展に出展した.この企画展でシステムはユーザ約 13,000 人に使用された.展示中にユーザスタディを行い,提案した手法が衣服コーディネートの追体験に対して有用な手法であることを示した.
- 2014-03-06
著者
-
相澤 清晴
東京大学大学院情報学環
-
相澤 清晴
東京大学 工学系研究科 電子情報工学専攻
-
相澤 清晴
東京大学工学系研究科
-
山崎 俊彦
東大 大学院情報理工学系研究科
-
相澤 清晴
東京大学大学院新領域創成科学研究科基盤情報学:東京大学工学系研究科電子工学
-
久保 友香
東大
-
相澤 清晴
Beckman Institute (university Of Illinois)
-
相澤 清晴
東京大学大学院情報学環:東京大学大学院情報理工学系研究科
-
山崎 俊彦
東京大学大学院学際情報学府
-
相澤 清晴
東京大学大学院
-
朏島 一樹
東京大学大学院学祭学府・情報学環
-
久保 友香
東京工科大学メディア学部
-
山崎 俊彦
東京大学
関連論文
- 2-1 超高精細映像システム・コンテンツ(2.超高精細映像技術・立体映像技術,超臨場感コミュニケーションの近未来像)
- シルエット抽出とモデル生成の相互フィードバックによるTime-Varying Meshの高精度化(3次元再構成・多視点画像処理,画像の認識・理解論文)
- 4.食べる(生活に役立つメディア処理-料理行動を科学する-)
- 一画素マッチングに基づく動き推定の基礎検討
- 線形フィルタによる2枚の合焦画像からの任意ぼけ画像の再構成
- Wi-Fi位置推定と映像のパーティクルフィルタによる広域人物追跡(ネット,ゲーム等,仮想空間における映像メディアの処理,表現,応用,及び一般)
- 極座標表現を用いた形状特徴ベクトルによる3次元ビデオのセグメンテーション(メディアを観る, 画像の認識・理解)
- D-12-29 トラックログを用いたライフログの効率的な閲覧・要約・検索システム(D-12.パターン認識・メディア理解A(パターンメディアの認識・理解・生成),一般セッション)
- Digital Public Art Exhibition 木とデジタル : テクノロジーが生みだす新しい自然
- Digital Public Art Exhibition木とデジタル : テクノロジーが生みだす新しい自然(高臨場感ディスプレイフォーラム2007)
- D-12-83 簡易スタジオでの背景処理にロバストなTime-Varying Mesh生成(D-12.パターン認識・メディア理解B(コンピュータビジョンとコンピュータグラフィックス),一般セッション)
- モバイル端末でのTime-Varying Mesh表示のためのメッシュ処理(立体映像技術一般)
- 2次元動画像をクエリとするTime-Varying Meshの検索(センサネットワーク,Webにおける映像メディア処理,応用及び一般)
- スケルトンを用いたTime-Varying Meshからの動き抽出と類似動作検索
- D-12-76 Time-Varying Meshの位相変化検出と編集(D-12. パターン認識・メディア理解,一般セッション)
- D-11-108 時間変化を考慮したランレングスを用いたTime-Varying Meshの幾何情報(D-11. 画像工学,一般セッション)
- D-11-107 Time Varying Meshesの階層的な分割と動き追跡(D-11. 画像工学,一般セッション)
- D-11-106 スケルトンを用いた動き抽出によるTime-Varying Meshのモデルベース符号化(D-11. 画像工学,一般セッション)
- モデルに基づくTime-Varying Meshの分析と合成(ITS画像処理,映像メディア及び一般)
- Time-Varying Meshの編集 : 動きの分解と再合成(ディジタルコンテンツ制作-DCS'07関連-)
- 非線形画像幾何変換攻撃に対応したオブジェクトベース電子透かしとWEBサービス展開(センサネットワーク,Webにおける映像メディア処理,応用及び一般)
- 3.料理メディア : 台所におけるディジタルコンテンツの処理と利用(ディジタルコンテンツ制作の最新動向〜ここまで来たディジタルコンテンツ制作〜)
- 空間共有コミュニケーションの実験システム : BEOEB(感性情報処理および一般)
- 6-7 空間共有コミュニケーションにおける図面とレンジデータを用いた建築物表現
- 空間共有コミュニケーションにおける建築物表現のための複合的な情報利用
- 食事ログの取得と処理 : 画像処理による食事記録
- 食事画像の解析における特徴量選択の評価(ITS画像処理,映像メディア及び一般)
- 食事画像の解析における特徴量選択の評価(画像処理,ITS画像処理,映像メディア及び一般)
- D-12-42 食事ログ取得と処理(D-12. パターン認識・メディア理解,一般セッション)
- 形状特徴を利用したオブジェクトへの電子透かし法
- A-7-8 形状特徴を利用したオブジェクトへの電子透かし手法 : 画質向上の為の改良手法の一検討
- A-7-1 オブジェクトを対象にした電子透かし手法の一検討
- 超高精細映像システム・コンテンツ
- NIRSによるコヒーレント運動検出時の視覚野の計測(日本基礎心理学会第24回大会,大会発表要旨)
- 視野角および映像の動きの振幅が映像酔いに及ぼす影響
- 動きの予測に基づく映像酔いのモデル
- DS-1-2 動きの予測しやすさによる映像酔いに関する映像の評価(DS-1. マルチメディア品質の客観評価/監視法, 情報・システム2)
- 航空高度データとレンジデータの統合による3次元街モデルの構築(ヒューマンインタフェースとバーチャルリアリティ)
- 航空高度データによる広域モデルとレンジデータによる高精細モデルの統合(マルチメディア,仮想環境及び一般)
- D-12-131 街のモデル化のためのレンジデータの欠損修復
- D-12-122 航空測量データにより構築した広域モデルと高精細建物モデルの統合
- 13-8 三次元モデル生成のためのレンジデータと輝度データの統合
- 消費者生成映像検索のための編集度順序推定法(一般セッション4,移動カメラ画像処理におけるパターン認識とメディア理解)
- D-12-17 多視点固定カメラ映像による日常生活データにおけるイベント検出(D-12. パターン認識・メディア理解, 情報・システム2)
- 自針と分針 : 映像からの人物抽出によるメディアアート(メディアアート,デジタルミュージアムとエンタテイメントメディア)
- The Shadow Man : 影を用いたインタラクティブ・メディア・アート(メディアアート,デジタルミュージアムとエンタテイメントメディア)
- B-15-10 スケルトンを利用した異なるモデル間でのメッシュ変形(B-15.モバイルマルチメディア通信,一般セッション)
- I-079 3次元ブロックのRun-length CodingによるTime-Varying Meshの圧縮(I分野:グラフィクス・画像)
- 拡張ブロックマッチングアルゴリズムを用いた3次元映像の圧縮
- D-11-24 動き補償とDCTを用いた3次元ビデオの圧縮(D-11.画像工学A(画像基礎・符号化),一般講演)
- J-013 3次元拡張ブロックマッチングによる残差データの解析(J分野:グラフィクス・画像)
- 拡張ブロックマッチングによる3次元ビデオの圧縮に関する検討(映像・マルチメディア処理及び一般)
- 拡張ブロックマッチングによる3次元ビデオの圧縮に関する検討(映像・マルチメディア処理及び一般)
- 3X-7 スケルトンを用いた異なるメッシュモデル間の対応点抽出(3次元画像処理・認識,学生セッション,人工知能と認知科学,情報処理学会創立50周年記念)
- D-11-69 閾値時間処理を用いたダイナミックレンジ拡大イメージセンサの試作
- D-11-35 DPマッチングの経路制限による2次元動画をクエリとしたTVM検索の精度向上(D-11.画像工学,一般セッション)
- I-043 2D動画クエリによるTVM検索のための特徴量の検討(グラフィクス・画像,一般論文)
- 2次元動画像をクエリとするTime-Varying Meshの検索(センサネットワーク,Webにおける映像メディア処理,応用及び一般)
- 1ZB-7 ウェアラブルカメラによる対人ログの取得と処理(ユビキタスデータ管理,学生セッション,ネットワーク,情報処理学会創立50周年記念)
- 無線LANマルチカメラサーベイランスシステムにおける映像伝送 : 画像サイズの動的変更とマルチカメラへの帯域割当(研究速報,符号化システム,画像符号化・映像メディア処理)
- D-11-80 無線LANベースのマルチカメラサーベイランスシステムにおけるビットレート制御のための評価尺度の検討(D-11.画像工学D(画像処理・計測),一般講演)
- 無線LANベースのマルチカメラサーベイランスシステムにおける階層的帯域割り当てによる映像伝送
- 無線LANベースのマルチカメラサーベイランスシステムにおける階層的帯域割り当てによる映像伝送
- 無線LANベースのマルチカメラサーベイランスシステムにおける階層的帯域割り当てによる映像伝送(映像伝送・符号化,オフィスにおけるマルチメディア通信,IP放送/映像サービスの品質及び一般)
- 無線LANベースのマルチカメラサーベイランスシステムにおける階層的帯域割り当てによる映像伝送(映像伝送・符号化,オフィスにおけるマルチメディア通信,IP放送/映像サービスの品質及び一般)
- 無線LANベースのマルチカメラサーベイランスシステムにおける階層的帯域割り当てによる映像伝送(映像伝送・符号化,オフィスにおけるマルチメディア通信,IP放送/映像サービスの品質及び一般)
- 6Z-1 食事画像における類似画像検索(インタラクティブシステム,学生セッション,ネットワーク,情報処理学会創立50周年記念)
- 5G-4 ペン入力による動的な軌跡の描画に関するユーザビリティ評価(ユーザインタフェース,一般セッション,インタフェース,情報処理学会創立50周年記念)
- D-9-13 食事ログシステムの利用状況調査(D-9.ライフインテリジェンスとオフィス情報システム,一般セッション)
- 食事画像の解析における特徴量選択の評価(画像処理,ITS画像処理,映像メディア及び一般)
- 2Y-8 食事ログに向けた画像処理による料理の味推定(物体認識,学生セッション,人工知能と認知科学,情報処理学会創立50周年記念)
- I-010 Video2Manga : A Comic-like Video Summary
- 2ZD-5 全方位カメラによる参照画像を用いた屋内における位置推定 : デジタルミュージアムでの鑑賞者の行動記録に向けて(位置・コンテキスト推定(2),学生セッション,ネットワーク,情報処理学会創立50周年記念)
- 全方位カメラによる位置参照画像群を用いた屋内位置推定 : デジタルミュージアムでの鑑賞者の行動記録に向けて(デジタルミュージアム,デジタルミュージアムとエンタテイメントメディア)
- D-11-124 多重解像度可変サンプリングイメージセンサの試作
- 新しい多重解像度スマートイメージセンサの設計と試作(イメージセンシング技術)
- 広域・分散マルチカメラサーベイランス映像における人物追跡の基礎検討(研究速報,映像処理応用・システム,画像符号化・映像メディア処理レター)
- 3. 屋外・広域マルチカメラサーベイランスに向けた人物追跡と閲覧支援システム(ネットワーク化されたカメラを支える諸技術とその応用)
- D-12-16 広域・屋外マルチカメラサーベイランスのための映像検索による閲覧支援(D-12. パターン認識・メディア理解,一般セッション)
- 広域・屋外マルチカメラサーベイランスのための閲覧支援システム(ITS画像処理,映像メディア及び一般)
- 広域・屋外マルチカメラサーベイランスのための閲覧支援システム(ITS画像処理,映像メディア及び一般)
- H-060 広域サーベイランス映像の時空間解析手法の検討(H分野:画像認識・メディア理解)
- 多焦点画像処理のためのグローバル/ローカルレジストレーションと多焦点動画像カメラの試作
- 協調エージェント間通信のためのトラッキングエージェントの提案とその検討(マルチメディアを支える通信技術)
- マルチメディア・アンビアンスコミュニケーションにおけるステレオベースの自然シーン構造化
- 3Y-8 コメント解析によるCGM動画のシーン処理(線画像・画像検索・映像処理,学生セッション,人工知能と認知科学,情報処理学会創立50周年記念)
- D-12-120 加速度センサによるクエリを用いたモーションキャプチャデータの検索(D-12.パターン認識・メディア理解B(コンピュータビジョンとコンピュータグラフィックス),一般セッション)
- 協調検索システムにおける継続検索に関する検討
- 階層的マルチエージェントによる効率的なエージェント間通信(マルチメディア通信プロトコル)
- 3S-8 モバイルエージェントを用いた検索システムの連携における一検討
- TAO-5 空間共有コミュニケーションプロジェクト(大型プロジェクト紹介,学術系企画)
- 空間共有コミュニケーションプロジェクト
- シーンの複数視点レンジデータの統合手法に関する検討
- I-009 Attention-based Clustering for Grouping Photo Collections by Quality of Composition
- O-012 写真による対人ログデータからの親密度推定(O分野:情報システム,一般論文)
- H-034 公共空間における多人数追跡と属性解析(H分野:画像認識・メディア理解,一般論文)
- H-025 食事ログシステムの解析の個人への適応と検討(H分野:画像認識・メディア理解,一般論文)
- H-022 写実的レンダリングに向けたTime-Varying Meshの表面属性推定(H分野:画像認識・メディア理解,一般論文)
- 3G-2 Multimedia Travel Story Retrieval using Location Data and Spatial Queries
- 1ZB-1 汎用ライフログデータ取得のための携帯端末の開発(ユビキタスデータ管理,学生セッション,ネットワーク,情報処理学会創立50周年記念)