FTVのための半自動奥行き推定方式
スポンサーリンク
概要
- 論文の詳細を見る
In this paper, we propose a semi-automatic depth estimation algorithm for Free-viewpoint TV (FTV). The proposed method is an extension of an automatic depth estimation method whereby additional manually created data is input for one or multiple frames. Automatic depth estimation methods generally have difficulty obtaining good depth results around object edges and in areas with low texture. The goal of our method is to improve the depth in these areas and reduce view synthesis artifacts in Depth Image Based Rendering. High-quality view synthesis is very important in applications such as FTV and 3DTV. We define three types of manual input data providing disparity initialization, object segmentation information, and motion information. This data is input as images, which we refer to as manual disparity map, manual edge map, and manual static map, respectively. For evaluation, we used MPEG multi-view videos to demonstrate that our algorithm can significantly improve the depth maps and, as a result, reduce view synthesis artifacts.
- 2010-11-01
著者
-
福嶋 慶繁
名古屋大学大学院情報科学研究科
-
福嶋 慶繁
名古屋大学大学院工学研究科谷本研究室
-
谷本 正幸
名古屋大学
-
谷本 正幸
名古屋大学 大学院 工学研究科
-
YENDO Tomohiro
Graduate School of Engineering, Nagoya University
-
TANIMOTO Masayuki
Graduate School of Engineering, Nagoya University
-
Yendo Tomohiro
Graduate School Of Engineering Nagoya University
-
Tehrani M
Graduate School Of Engineering Nagoya University
-
Panahpour Tehrani
Nagoya Univ. Nagoya Jpn
-
藤井 俊彰
東京工大 大学院理工学研究科
-
Fujii T
Graduate School Of Science And Engineering Tokyo Institute Of Technology
-
Fujii Toshiaki
Graduate School Of Engineering Nagoya University
-
Tanimoto M
Graduate School Of Engineering Nagoya University
-
Tanimoto Masayuki
The Graduate School Of Engineering Nagoya University
-
藤井 俊章
名古屋大学大学院工学研究科電子情報学
-
Tehrani Mehrdad
Nagoya Univ. Nagoya Jpn
-
Panahpour Tehrani
Graduate School Of Engineering Nagoya University
-
WILDEBOER Meindert
Graduate School of Engineering Nagoya University
-
FUKUSHIMA Norishige
Graduate School of Engineering, Nagoya Institute of Technology
-
Tanimoto Masayuki
Graduate School Of Engineering Nagoya University
-
Fujii Toshiaki
Graduate School Of Science And Engineering Tokyo Institute Of Technology
-
Fujii Toshiaki
Graduate School Of Bioresource And Bioenvironmental Sciences Kyushu Unviersity
-
Fukushima Norishige
Graduate School Of Engineering Nagoya Institute Of Technology
関連論文
- 会長就任挨拶
- ハンディカメラからの自由視点画像生成(画像符号化,通信・ストリーム技術、一般)
- 路車間並列光通信の空間周波数特性に基づく符号化方式の検討(ブロードバンドアクセス,ホームネットワーク,ネットワークサービス,通信利用アプリケーション,一般)
- 異なる解像度のカメラからの自由視点画像生成 (メディア工学 コンシューマエレクトロニクス)
- LED信号機通信のための追尾機構を備えた車載受信機(画像符号化,通信・ストリーム技術、一般)
- 立体映像通信における画像間でのフレーム遅延が立体視へ与える影響(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- 超解像処理による自由視点画像の画質改善(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- 異なる解像度のカメラからの自由視点画像生成(画像映像処理・システム,ネットワーク,放送,一般)
- 力覚メディア・音声・ビデオを利用した遠隔教育システムにおける受信バッファリング制御の効果 (放送方式・コンシューマエレクトロニクス)
- 立体ビデオ・力覚メディアを用いた遠隔制御システムにおけるネットワーク遅延の影響 (放送方式・コンシューマエレクトロニクス)
- 多視点デプスマップの情報を用いた高効率多視点映像符号化
- DS-3-7 高速度カメラを用いた時分割全周囲光線取得システム(DS-3. 高フレームレート映像技術の最前線〜高フレームレート化がもたらす映像処理の新たな展開〜,シンポジウムセッション)
- ミラー走査による全周囲光線取得実験(画像符号化,通信・ストリーム技術,及び一般)
- ハンディカメラからの自由視点画像生成
- 自由視点画像生成における残差信号の予測方式(一般セッション,映像ハンドリング技術とその応用)
- FTVの技術開発と展望(映像符号化,システム及び一般)
- A-17-18 LEDアレイと高速度カメラを用いた可視光通信システムの高速化(A-17.ITS,一般セッション)
- A-17-19 LEDアレイと高速度カメラを用いた路車間可視光通信のための輝度補正(A-17.ITS,一般セッション)
- 長距離可視光通信のための車載受信機の振動軽減(ITS画像処理,映像メディア及び一般)
- 長距離可視光通信のためのLED信号機検出(ITS画像処理,映像メディア及び一般)
- 長距離可視光通信のためのLED信号機検出(通信,ITS画像処理,映像メディア及び一般)
- 長距離可視光通信のための車載受信機の振動軽減(通信,ITS画像処理,映像メディア及び一般)
- 光線空間処理によるFTVシーンの編集(画像符号化,通信・ストリーム技術,一般)
- 時分割を用いた全周囲縮小画像取得システム(画像符号化,通信・ストリーム技術,一般)
- ディジタル高精細/超高精細動画像メディアの動向
- 特徴点軌跡並行化による2次元カメラアレイレクティフィケーション(3次元映像情報メディア技術)
- 自然特徴点を用いたマルチカメラ画像の幾何補正(研究速報,3次元映像・多視点映像,画像符号化・映像メディア処理)
- 自然特徴点を用いたマルチカメラレクティフィケーション(画像符号化・通信・ストリーム技術,及び一般)
- 自然特徴点を用いたマルチカメラレクティフィケーション
- 直線的連続手振り動作の認識
- 多視点・多聴点データ取得システムを用いた自由視聴点映像生成(研究速報,三次元・多視点映像処理,画像符号化・映像メディア処理レター)
- 自由視点映像技術
- 自由視点映像通信のための低遅延多視点映像符号化(画像・映像処理)
- リアルタイム自由視点画像生成システム
- CQ2010-16 力覚メディア・ビデオを用いた遠隔制御システムへのPosition-Force制御方式の適用(一般,映像配信・コミュニケーションを支える品質技術,一般)
- 多地点間における音声・ビデオを用いた合唱のQoE評価 (放送技術)
- 瀬戸デジタルテレビ放送所(映像現場訪問記)
- SfM位置推定による静的シーンの自由視点画像生成 (放送技術)
- 前立腺摘出標本画像に基づく仮想針生検システムの評価(一般セッション(3) : 福祉・医療のためのパターン認識・メディア理解)
- 前立腺摘出標本画像に基づく仮想針生検システムの評価(福祉・医療のためのパターン認識・メディア理解)
- 前立腺摘出標本画像に基づく仮想針生検システムの評価(福祉・医療のためのパターン認識・メディア理解)
- 動物体抽出を用いた自由視点画像合成 (放送技術)
- Multi-Pass Dynamic Programmingによる光線空間補間(研究速報,3次元映像・多視点映像,画像符号化・映像メディア処理)
- D-11-9 機械制御カメラアレイの幾何補正(D-11. 画像工学,一般セッション)
- D-11-7 奥行き画像を用いた3D warpingによる自由視点画像生成(D-11. 画像工学,一般セッション)
- I-027 機械制御された二次元カメラアレイで取得した光線空間データの補正(I分野:グラフィクス・画像)
- 光線空間法に基づく実時間広角自由視点画像合成(信号処理, 符号化とそれらを用いた知的マルチメディアシステム, 一般)
- 光線空間法に基づく実時間広角自由視点画像合成(信号処理, 符号化とそれらを用いた知的マルチメディアシステム, 一般)
- 光線空間法に基づく実時間広角自由視点画像合成(信号処理, 符号化とそれらを用いた知的マルチメディアシステム, 一般)
- 端末間同期制御を用いたネットワーク型シューティングゲームにおけるQoE評価(ネットワークミドルウェア,仮想化技術,グリーニング技術,Webサービス,インターネットサービス,ユビキタスサービス,ソーシャルネットワーク,センサネットワーク,及び一般)
- 力覚メディア・音声・ビデオを利用した遠隔教育システムにおける受信バッファリング制御の効果(モバイル/放送融合技術・システム及びアプリケーション品質,モバイルコンテンツ,モバイル映像配信, P2P/アドホックネットワーク,一般)
- 立体ビデオ・力覚メディアを用いた遠隔制御システムにおけるネットワーク遅延の影響(モバイル/放送融合技術・システム及びアプリケーション品質,モバイルコンテンツ,モバイル映像配信, P2P/アドホックネットワーク,一般)
- 力覚を利用したネットワーク型リアルタイムゲームにおけるネットワーク遅延とパケット欠落がQoEに及ぼす影響(ネットワーク品質,トラヒック計測,一般)
- FTVのための半自動奥行き推定方式
- 異なる解像度のカメラからの自由視点画像生成(画像映像処理・システム,ネットワーク,放送,一般)
- リアルタイム通信のためのDIBRによる自由視点映像合成(テーマセッション,Computational Photography)
- BS-5-1 力覚メディア・ビデオを用いた遠隔制御システムのQoE評価 : Position-Position制御方式とPosition-Force制御方式の比較(BS-5.QoE最前線-情報通信サービスにおけるユーザ体感品質-,シンポジウムセッション)
- B-11-17 力覚メディア・サウンド・ビデオ伝送における受信バッファリング制御の効果(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-16 力覚メディア・ビデオ・音声を用いた遠隔教育システムにおけるネットワーク遅延揺らぎがQoEに及ぼす影響(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-15 力覚を用いた積み木遊びにおける予測を用いた端末間同期制御の効果(B-11.コミュニケーションクオリティ,一般セッション)
- 力覚メディア・サウンド・ビデオ伝送におけるネットワーク遅延とその揺らぎの影響
- B-11-4 自由視点映像通信におけるネットワーク遅延が視点変更に及ぼす影響(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-6 嗅覚及び触覚メディア伝送におけるメディア間同期誤差とQoEとの関係(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-7 力覚メディア・ビデオを用いた遠隔制御システムのQoE評価 : ネットワーク遅延変動の影響(B-11.コミュニケーションクオリティ,一般セッション)
- 嗅覚及び触覚メディア間の同期誤差とQoEとの関係(ユビキタス/ブロードバンドネットワーク品質,サービス品質,品質評価モデル,信頼性とセキュリティ,コンテンツ配信,一般)
- 自由視点映像通信におけるQoE評価 : ネットワーク遅延が視点変更に及ぼす影響(五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- 力覚を利用したネットワーク型リアルタイムゲームにおける共有オブジェクトの管理者の決定方法がQoEに及ぼす影響(ユビキタス/ブロードバンドネットワーク品質,サービス品質,品質評価モデル,信頼性とセキュリティ,コンテンツ配信,一般)
- SfM位置推定による静的シーンの自由視点画像生成(画像符号化,通信・ストリーム技術,一般)
- 動物体抽出を用いた自由視点画像合成(画像符号化,通信・ストリーム技術,一般)
- SfM位置推定による静的シーンの自由視点画像生成(画像符号化,通信・ストリーム技術,一般)
- 動物体抽出を用いた自由視点画像合成(画像符号化,通信・ストリーム技術,一般)
- 多地点間における音声・ビデオを用いた合唱のQoE評価(画像符号化,通信・ストリーム技術,一般)
- 多地点間における音声・ビデオを用いた合唱のQoE評価(画像符号化,通信・ストリーム技術,一般)
- B-11-14 力覚メディア・ビデオを用いた遠隔制御システムにおける作業のしやすさのQoE評価(B-11. コミュニケーションクオリティ,一般セッション)
- 前進視点における自由視点画像生成(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- 移動カメラアレーを用いた時空間の自由視点画像生成(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- Depth Image Based Renderingのための奥行画像へのポストフィルタリング(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- カメラと鏡を用いた多点光線取得システム(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- 嗅覚・力覚を利用した遠隔生け花システムにおける生徒に対するアンケート調査と香り空間の大きさの影響(映像/音声サービスの品質,メディア品質,ネットワークの品質・QoS制御,次世代/新世代ネットワークアーキテクチャ,災害時のネットワークとコミュニケーション,一般)
- 遠隔教育システムにおける力覚の制御方式の比較(モバイル/放送融合技術・システムおよびアプリケーション,モバイルコンテンツ配信,P2P/アドホックネットワーク,及びこれらの品質,一般)
- 入力・出力 自由視点映像伝送におけるユーザ体感品質評価 : ネットワーク遅延の影響
- B-11-22 力覚メディア・ビデオを用いた遠隔制御システムにおけるQoE評価 : 反力の適応制御の効果(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-9 立体映像通信におけるスライス数がQoEに及ぼす影響(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-8 自由視点立体映像伝送におけるQoE評価 : ネットワーク遅延の影響(B-11.コミュニケーションクオリティ,一般セッション)
- ネットワーク型ゲームにおける香りが利用者に届くまでの時間が公平性に及ぼす影響(実世界センシングとその応用)
- 重み付きクロスバイラテラルフィルタによる奥行き推定精度の向上
- 奥行画像符号化のための重み付きジョイントバイラテラルアップサンプリングによる超解像(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- Quality of Experience Assessment of Dynamic Output Timing Control of Fragrance in Networked Virtual Environment
- 分散仮想環境における香りの出力タイミングの動的制御(サービス品質,クラウド,SDN(Software-Defined Network),コンテンツ配信,一般)
- 多地点間の合唱におけるメディア同期のユーザ体感品質評価
- ハイブリッド型P2Pネットワークにおけるピアの通信速度を考慮した複製分割配置型コンテンツ共有手法の検討 (ネットワークシステム)
- 自由視点映像及び力覚メディアを用いた遠隔制御システムにおける視点変更の効果(メディア・コミュニケーションの品質と福祉,及び一般)
- 仮想環境における嗅覚・力覚・聴覚が臨場感に与える効果(一般セッション,実時間処理実空間センシングと環境理解)
- 仮想環境における嗅覚・力覚・聴覚が臨場感に与える効果(一般セッション,実時間処理実空間センシングと環境理解)
- 7-3 仮想環境における立体視による視覚・嗅覚・力覚が臨場感に与える効果(第7部門 ヒューマンインフォメーション2)
- A-16-18 嗅覚・力覚・聴覚を用いた仮想環境における一対比較法による臨場感の評価(A-16.マルチメディア・仮想環境基礎)
- 端末間同期制御を用いたメディア間同期アルゴリズム(一般セッション,実時間処理実空間センシングと環境理解)
- 端末間同期制御を用いたメディア間同期アルゴリズム(一般セッション,実時間処理実空間センシングと環境理解)
- A-16-4 画像・奥行き画像伝送方式を用いた自由視点映像伝送における視点情報のバッファリング制御の効果(A-16.マルチメディア・仮想環境基礎)
- A-16-3 力覚メディア・ビデオを用いた遠隔制御システムにおけるネットワーク遅延がQoEに及ぼす影響の作業依存性(A-16.マルチメディア・仮想環境基礎)