25眼カメラアレイによるリアルタイム超解像自由視点画像合成(アンコンベンショナルカメラとイメージセンサおよび一般)
スポンサーリンク
概要
- 論文の詳細を見る
本稿では,カメラアレイによって撮影された多視点画像から,任意の新しい視点から見た画像(自由視点画像)を実時間で高精細に合成するシステムについて報告する.本システムでは,まず合成対象視点から見た画素単位の奥行きマップをセミグローバル・ステレオ法によって推定し,その後得られた奥行きマップを基に多視点画像を位置合わせして超解像処理を行う.また,GPU上での並列実装により,実時間での処理を可能とした.本システムでは,25視点のうち合成対象視点に近い9視点の低解像度(160×120画素)画像を入力とし,高解像度(320×240画素)の自由視点画像を1フレームあたり40ミリ秒程度で可能であった.
- 2013-11-08
著者
-
高橋 桂太
東京大学IRT研究機構
-
苗村 健
東京大学大学院情報理工学系研究科電子情報学専攻
-
苗村 健
東京大学大学院 情報理工学系研究科 電子情報学専攻
-
中島 諒
東京大学工学部
-
中島 諒
東京大学大学院情報理工学系研究科
-
浜田 宏一
東京大学大学院情報理工学系研究科
-
高橋 桂太
名古屋大学大学院工学研究科
-
中島 諒
東京大学大学院 情報理工学系研究科・学際情報学府
-
高橋 桂太
名古屋大学
-
苗村 健
東京大学大学院 情報理工学系研究科
関連論文
- PLZTを用いた高速可変焦点レンズの基礎実験 : 高速時分割方式による立体ディスプレイ実現に向けて(第2報)(立体映像における人間工学的研究-立体映像の知覚認知・生体作用とその評価,及び立体映像技術一般)
- 裸眼立体映像システムにおけるオブジェクトの切り抜きと見え方の操作(ITS画像処理,映像メディア及び一般)
- 裸眼立体映像システムにおけるオブジェクトの切り抜きと見え方の操作(次世代映像・品質,ITS画像処理,映像メディア及び一般)
- 可視光通信プロジェクタを用いた残像ディスプレイの基礎検討(三次元ディスプレイ,HCGシンポジウム)
- 対話型GAを用いた似顔絵作成における髪モデルの検討(VR, ヒューマンファクタ, 一般)
- 超解像的アプローチによる視点補間の基礎検討 (画像符号化・映像メディア処理レター特集)
- PLZTを用いた高速可変焦点レンズの基礎検討 : 高速時分割方式による立体ディスプレイ実現に向けて(立体映像における人間工学的研究)
- バーチャルとリアルの連動を支える基盤技術
- HIVE : 多次創造性基盤としてのメディア・アート・アーカイウ゛
- 超解像的アプローチによる視点補間の基礎検討(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- ネットワークカメラアレイを用いた実時間全焦点自由視点映像合成システム(テーマ関連セッション2)
- ネットワークカメラアレイを用いた実時間全焦点自由視点映像合成システム(テーマ関連セッション2,三次元画像,多視点画像)
- 自由視点画像合成における光線情報のサンプリングと被写界深度に関する理論(コンピュータグラフィックス)
- GPUを用いた合焦判定によるLight Fieldからの全焦点画像合成(エンターテイメントと仮想環境,一般)
- D-11-150 奥行き推定を用いたインテグラルフォトグラフィからの自由視点画像合成
- 多眼カメラアレイにおけるPlenoptic Samplingと等価被写界深度に関する理論的考察(高精細画像の処理・表示および一般)
- 多眼カメラアレイにおけるPlenoptic Samplingと等価被写界深度に関する理論的考察
- 可視光通信プロジェクタと高速度カメラを用いたユビキタス情報環境の基礎検討(基礎/応用,サイバーワールド論文)
- 可視光通信プロジェクタを用いた3次元形状ディスプレイの基礎検討(マルチメディア仮想環境基礎,及び一般,HCGシンポジウム)
- Photonastic Surface : 光で制御する3次元形状ディスプレイ(三次元ディスプレイ,HCGシンポジウム)
- 3次元ディスプレイの見え方に関する光線情報記述法の基礎検討 (立体映像技術・ヒューマンインフォメーション)
- D-12-66 多数画像からの共通物体の検出とセグメンテーションの基礎検討(D-12.パターン認識・メディア理解B(コンピュータビジョンとコンピュータグラフィックス),一般セッション)
- 可視光通信プロジェクタと高速度カメラを用いたユビキタス情報環境の基礎検討--映像中に隠された情報の可視化とその応用
- 匂い情報を手掛かりにしたライフログシステムにおけるイベント検出手法の基礎検討(人工現実感、及び一般)
- 匂い情報を手掛かりにしたライフログシステムにおけるイベント検出手法の基礎検討
- 匂い情報を手掛かりにしたライフログシステムにおけるイベント検出手法の基礎検討(人工現実感,及び一般)
- 多眼画像の間引きと符号化特性に関する基礎実験(研究速報,多視点映像符号化,画像符号化・映像メディア処理レター)
- ネットワークカメラアレイを用いた実時間全焦点自由視点映像合成システム(テーマ関連セッション2,三次元画像,多視点画像)
- 自由視点画像合成における見え方を考慮したレンズアレイ撮像系の設定(コンピュータグラフィックス)
- D-11-63 自由視点画像合成における見え方の変化を考慮したレンズアレイ撮像系の設計に関する基礎検討(D-11.画像工学D(画像処理・計測),一般講演)
- 自由視点画像合成のための適応型ポストフィルタ(研究速報,映像メディア応用,画像符号化・映像メディア処理レター)
- 流体レンズアレイを用いた光学焦点と合成焦点の制御(テーマセッション,複合現実感のためのパターン認識・理解)
- A-16-39 実時間IBMR技術を応用した電子的な鏡(Plenoptic Digital Mirror)の試作
- 多眼カメラ画像群からの実時間自由視点画像合成--視点依存奥行き推定による高速アルゴリズムの検討
- Light Field Renderingのための合焦判定法とステレオマッチング法の関係について(一般, 顔・ジェスチャーの認識・理解)
- Light Field Renderingのための合焦判定法の空間領域における定義と非格子カメラ群入力への適用(コンピュータグラフィックス)
- Light Field Renderingにおける合焦判定法の空間解析(画像符号化・通信・ストリーム技術,及び一般)
- Light Field Renderingにおける合焦判定法の空間解析(画像符号化・通信・ストリーム技術,及び一般)
- Adaptive IP Imagingの理論的検討 (立体映像技術情報ディスプレイ)
- Light Field Rendering における合焦判定と全焦点画像合成(コンピュータグラフィックス)
- Light Field Renderingにおける全焦点画像合成に向けた合焦判定に関する基礎検討(一般セッション(4))(データマイニングとパターン認識・メディア理解)
- Plenoptic Sampling再考 : 視差精度が視点補間の品質に与える影響について(研究速報,三次元・多視点映像処理,画像符号化・映像メディア処理レター)
- 多視点画像技術の信号処理的枠組みに向けて(テーマ関連オーガナイズドセッション2)
- 多視点画像技術の信号処理的枠組みに向けて(テーマ関連オーガナイズドセッション1,三次元画像,多視点画像)
- 多視点画像技術の信号処理的枠組みに向けて(テーマ関連オーガナイズドセッション1,三次元画像,多視点画像)
- 色・温度画像を用いたベイズ推定に基づく人物領域抽出の基礎検討(ディジタルコンテンツ制作-DCS'07関連-)
- D-11-49 半透明マスク付き多眼画像を用いた自由視点映像合成の基礎検討(D-11.画像工学,一般セッション)
- レンズアレイを用いた実時間全焦点自由視点画像合成システム(コンピュータグラフィックス)
- D-11-143 レンズアレイ方式自由視点画像合成における合焦判定手法の適用(D-11. 画像工学D(画像処理・計測), 情報・システム2)
- D-11-60 時空間情報伝搬に基づく多眼動画像の対話的セグメンテーションの基礎検討(D-11.画像工学,一般セッション)
- Visual-Wordの前景背景情報と局所的な共起情報を用いた画像分類
- Visual-Wordの前景背景情報と局所的な共起情報を用いた画像分類
- アピアランスモデルを用いない外包形状入力からの画像セグメンテーション (画像の認識・理解論文特集)
- Visual-Wordの前景背景情報と局所的な共起情報を用いた画像分類 (情報論的学習理論と機械学習)
- Visual-Wordの前景背景情報と局所的な共起情報を用いた画像分類 (パターン認識・メディア理解)
- Look-up Tableと局所ディザパターンを用いた適応的ループフィルタ (論文小特集 画像処理・符号化とアプリケーション)
- アピアランスモデルを用いない外包形状入力からの画像セグメンテーション(幾何学的解析,最適化,第13回画像の認識・理解シンポジウム推薦論文,画像の認識・理解論文)
- 色画像と温度画像を併用した人物領域抽出--統計的手法によるアプローチ
- LI-009 レート-歪み理論から見た多眼画像の間引きと符号化(グラフィクス・画像)
- 多眼ステレオ法の周波数解析的な解釈と一般化(研究速報,3次元映像・多視点映像,画像符号化・映像メディア処理)
- 視点依存奥行きマップの実時間推定に基づく多眼画像からの自由視点画像合成(コンピュータグラフィックス)
- BP-3-6 メディアのクオリティから体験のクオリティへ(BP-3. コミュニケーションクオリティ研究への提言 : CQ研専設立20周年記念,パネルセッション,ソサイエティ企画)
- 複数の距離画像を用いた実時間IBMRシステムに向けた基礎検討
- D-11-122 視点依存簡易モデルのインタラクティブ合成によるIBRの検討(D-11.画像工学D)
- 心の相互ケアのためのWebコミュニティ「リグレト」の設計と運営
- Visual-Wordの前景背景情報と局所的な共起情報を用いた画像分類(テーマセッション,コンピュータビジョンとパターン認識のための機械学習)
- Visual-Wordの前景背景情報と局所的な共起情報を用いた画像分類(テーマセッション,コンピュータビジョンとパターン認識のための機械学習)
- リンク機構を構成するリール式アクチュエータ群による動的3次元形状表現(一般,複合現実感,仮想都市,及び一般)
- 超解像自由視点画像合成における超解像演算の高速化実装 (画像工学)
- 超解像自由視点画像合成における超解像演算の高速化実装 (メディアエ学 映像表現&コンピュータグラフィックス)
- 日常生活の匂い記録に向けたセンシングシステムの設計及び評価(教育・訓練・協調)
- E-IMPACT : 日本のアニメーションにおける誇張表現を模した3DCG
- 超解像自由視点画像合成における超解像演算の高速化実装(高精細画像処理・表示及び一般)
- 特別講演 多人数調和型情報提示技術の構築と実践 (医用画像)
- Look-up Table と局所ディザパターンを用いた適応的ループフィルタ
- CO_2濃度計測に基づくミュージアム来場者数の推定(サイバースペースとVR)
- 視差を保持したステレオ画像の対話的リターゲッティング
- 2-7 Adaptive IP Imagingの基礎検討(第2部門 自由視点・3次元画像)
- Light Field Renderingにおける合焦判定法の空間解析(画像符号化・通信・ストリーム技術,及び一般)
- Light Field Rendering における合焦判定法の空間解析
- J-010 合焦判定に基づく全焦点Light Field Viewer(J.グラフィクス・画像)
- 筆記音のフィードバックが単純な筆記作業に及ぼす影響の検討
- ソラ・カラ : 太陽光を活用した屋外空間の発色制御
- 超解像自由視点画像合成における超解像演算の高速化実装
- 可視光通信プロジェクタの通信路における結像光学系の検討 : 位置情報を埋め込んだ映像の空中像提示とプロジェクタ投影(光学・画像,五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- 可視光通信プロジェクタの通信路における結像光学系の検討 : 位置情報を埋め込んだ映像の空中像提示とプロジェクタ投影(光学・画像,五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- 複合現実感展示システムMRsionCaseにおける多層空中像のための実像光学系の検討(光学・画像,五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- 複合現実感展示システムMRsionCaseにおける多層空中像のための実像光学系の検討(光学・画像,五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- ラジオ聴取時における感想共有の基礎検討(エンタテインメントのためのメディアとリアリティー)
- 超指向性スピーカー群を用いた鑑賞支援システムの基礎検討(エンタテインメントのためのメディアとリアリティー)
- ミュージアムにおける名札を用いた鑑賞者の鑑賞方向センシングの基礎検討(サービスや生活とVR/AR,人工現実感)
- 3次元形状表現のためのリール式伸縮アクチュエータの提案(3次元インタラクション)
- 前景・背景色分布の同時マッチングによる画像セグメンテーション(幾何学的解析・最適化,画像の認識・理解論文)
- 超解像自由視点画像合成の性能評価と画質改善(高精細度画像処理・表示,一般)
- アニメーション制作現場における筆記音の強調フィードバックの有用性に関する実践的研究(アート&エンタテインメント3)
- ラジへぇ : 声の効果音を用いた感想共有メディア(アート&エンタテインメント3)
- 4. E-IMPACT : 日本のアニメーションにおける誇張表現を模した3DCG(最新のディジタルコンテンツ制作技術)
- 25眼カメラアレイによるリアルタイム超解像自由視点画像合成(アンコンベンショナルカメラとイメージセンサおよび一般)
- [招待講演]多人数調和型情報提示技術の構築と実践(医用画像一般,及び治療支援/治療中のイメージング)
- A-16-24 聴衆との双方向でのインタラクション機能を備えたプレゼンテーションロボット(A-16.マルチメディア・仮想環境基礎)