A Semi-Automatic Depth Estimation Method for FTV
スポンサーリンク
概要
- 論文の詳細を見る
In this paper, we propose a semi-automatic depth estimation algorithm for Free-viewpoint TV (FTV). The proposed method is an extension of an automatic depth estimation method whereby additional manually created data is input for one or multiple frames. Automatic depth estimation methods generally have difficulty obtaining good depth results around object edges and in areas with low texture. The goal of our method is to improve the depth in these areas and reduce view synthesis artifacts in Depth Image Based Rendering. High-quality view synthesis is very important in applications such as FTV and 3DTV. We define three types of manual input data providing disparity initialization, object segmentation information, and motion information. This data is input as images, which we refer to as manual disparity map, manual edge map, and manual static map, respectively. For evaluation, we used MPEG multi-view videos to demonstrate that our algorithm can significantly improve the depth maps and, as a result, reduce view synthesis artifacts.
著者
-
Yendo Tomohiro
Graduate School Of Engineering Nagoya University
-
WILDEBOER Meindert
Graduate School of Engineering Nagoya University
-
Tanimoto Masayuki
Graduate School Of Engineering Nagoya University
-
Tehrani Mehrdad
Graduate School Of Engineering Nagoya University
-
Fujii Toshiaki
Graduate School Of Bioresource And Bioenvironmental Sciences Kyushu Unviersity
-
Fukushima Norishige
Graduate School Of Engineering Nagoya Institute Of Technology
関連論文
- 立体映像通信における画像間でのフレーム遅延が立体視へ与える影響(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- 超解像処理による自由視点画像の画質改善(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- 異なる解像度のカメラからの自由視点画像生成(画像映像処理・システム,ネットワーク,放送,一般)
- 力覚メディア・音声・ビデオを利用した遠隔教育システムにおける受信バッファリング制御の効果 (放送方式・コンシューマエレクトロニクス)
- 立体ビデオ・力覚メディアを用いた遠隔制御システムにおけるネットワーク遅延の影響 (放送方式・コンシューマエレクトロニクス)
- CQ2010-16 力覚メディア・ビデオを用いた遠隔制御システムへのPosition-Force制御方式の適用(一般,映像配信・コミュニケーションを支える品質技術,一般)
- 多地点間における音声・ビデオを用いた合唱のQoE評価 (放送技術)
- Long Distance Road Sign Recognition Using an Active Camera System
- SfM位置推定による静的シーンの自由視点画像生成 (放送技術)
- 動物体抽出を用いた自由視点画像合成 (放送技術)
- 端末間同期制御を用いたネットワーク型シューティングゲームにおけるQoE評価(ネットワークミドルウェア,仮想化技術,グリーニング技術,Webサービス,インターネットサービス,ユビキタスサービス,ソーシャルネットワーク,センサネットワーク,及び一般)
- 確率的信頼性推定を用いたFTVのための画像合成
- 力覚メディア・音声・ビデオを利用した遠隔教育システムにおける受信バッファリング制御の効果(モバイル/放送融合技術・システム及びアプリケーション品質,モバイルコンテンツ,モバイル映像配信, P2P/アドホックネットワーク,一般)
- 立体ビデオ・力覚メディアを用いた遠隔制御システムにおけるネットワーク遅延の影響(モバイル/放送融合技術・システム及びアプリケーション品質,モバイルコンテンツ,モバイル映像配信, P2P/アドホックネットワーク,一般)
- PROTOTYPE OF HIGH RESOLUTION 3D DISPLAY USING TWO LENS ARRAYS AND DEPTH SAMPLING(International Workshop on Advanced Image Technology 2009)
- LIGHT BEAM RECONSTRUCTING 3D DISPLAY USING LIGHT SHUTTER(INTERNATIONAL Workshop on Advanced Image Technology 2008)
- AN INTEGRATED AUDIO-VISUAL VIEWER FOR A LARGE SCALE MULTIPOINT CAMERAS AND MICROPHONES(International Workshop on Advanced Image Technology 2007)
- 力覚を利用したネットワーク型リアルタイムゲームにおけるネットワーク遅延とパケット欠落がQoEに及ぼす影響(ネットワーク品質,トラヒック計測,一般)
- FTVのための半自動奥行き推定方式
- 異なる解像度のカメラからの自由視点画像生成(画像映像処理・システム,ネットワーク,放送,一般)
- リアルタイム通信のためのDIBRによる自由視点映像合成(テーマセッション,Computational Photography)
- BS-5-1 力覚メディア・ビデオを用いた遠隔制御システムのQoE評価 : Position-Position制御方式とPosition-Force制御方式の比較(BS-5.QoE最前線-情報通信サービスにおけるユーザ体感品質-,シンポジウムセッション)
- B-11-17 力覚メディア・サウンド・ビデオ伝送における受信バッファリング制御の効果(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-16 力覚メディア・ビデオ・音声を用いた遠隔教育システムにおけるネットワーク遅延揺らぎがQoEに及ぼす影響(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-15 力覚を用いた積み木遊びにおける予測を用いた端末間同期制御の効果(B-11.コミュニケーションクオリティ,一般セッション)
- 確率的信頼性推定を用いたFTVのための画像合成
- RM-002 LED Traffic Light Detection Using a High-speed-camera for a Road-to-vehicle Visible Light Communication System
- RI-007 Reliable View Synthesis with Automatic Error Compensation for FTV
- Visible Light Communication Between LED Array and On-vehicle High-speed Camera
- Traffic signs recognition based on color and shape information (パターン認識・メディア理解)
- WALK-THROUGH VIEW FOR FTV WITH CIRCULAR CAMERA SETUP(International Workshop on Advanced Image Technology 2009)
- DETECTING A LED TRAFFIC LIGHT FOR VISIBLE LIGHT COMMUNICATION SYSTEM(International Workshop on Advanced Image Technology 2009)
- RAY-SPACE INTERPOLATION BY WARPING DISPARITY MAPS(International Workshop on Advanced Image Technology 2009)
- RECTIFICATION OF PURE TRANSLATION 2D CAMERA ARRAY(International Workshop on Advanced Image Technology 2009)
- 3D SCENE EDITING BY RAY-SPACE PROCESSING(International Workshop on Advanced Image Technology 2009)
- ADJUSTMENT OF MULTIPLE CAMERA ALIGNMENT USING CAMERA CALIBRATION(INTERNATIONAL Workshop on Advanced Image Technology 2008)
- FREE VIEWPOINT IMAGE GENERATION IN CIRCULAR CAMERA SETUP(INTERNATIONAL Workshop on Advanced Image Technology 2008)
- FREE VIEWPOINT IMAGE GENERATION USING ESTIMATED DEPTH AT CAMERA VIEWPOINTS(INTERNATIONAL Workshop on Advanced Image Technology 2008)
- A NOVEL RECTIFICATION METHOD FOR TWO-DIMENSIONAL CAMERA ARRAY BY PARALLELIZING LOCUS OF FEATURE POINTS(INTERNATIONAL Workshop on Advanced Image Technology 2008)
- HIGH-SPEED IMAGE PROCESSING SYSTEM FOR ROAD-TO-VEHICLE VISIBLE LIGHT COMMUNICATION(INTERNATIONAL Workshop on Advanced Image Technology 2008)
- AN INTEGRATED AUDIO-VISUAL VIEWER FOR A LARGE SCALE MULTIPOINT CAMERAS AND MICROPHONES
- G_007 Arbitrary Listening-point Generation Using Acoustic Transfer Function Interpolation in A Large Microphone Array
- THE SUB-BAND SOUND WAVE RAY-SPACE REPRESENTATION(International Workshop on Advanced Image Technology 2006)
- 対応点を用いた複数カメラの色補正
- Measuring the Export Subsidy Equivalents (ESEs) through Price Discrimination Generated by Exporting State Trading Enterprises
- 力覚メディア・サウンド・ビデオ伝送におけるネットワーク遅延とその揺らぎの影響
- AN OPTIMIZATION METHOD FOR FREE VIEW-POINT IMAGE GENERATION USING RAY-SPACE(International Workshop on Advanced Image Technology 2007)
- A RAY-SPACE INTERPOLATION ALGORITHM FOR FREE VIEWPOINT GENERATION CONSTRAINED WITH IMAGE SEGMENTATION(International Workshop on Advanced Image Technology 2007)
- SCENE SEPARATION AND SYNTHESIS PROCESSING IN RAY-SPACE(International Workshop on Advanced Image Technology 2007)
- EXPERIMENT ON A CROSSING TURN ASSISTANCE SYSTEM IN REAL INTERSECTION ENVIRONMENT(International Workshop on Advanced Image Technology 2007)
- HYBRID LONG-DISTANCE VISIBLE LIGHT COMMUNICATION SYSTEM IN A DYNAMIC ENVIRONMENT(International Workshop on Advanced Image Technology 2007)
- RAY-SPACE CODING USING SINUSOIDAL STRUCTURE IN CIRCULAR CAMERA ARRANGEMENT(International Workshop on Advanced Image Technology 2006)
- FREE VIEWPOINT IMAGE GENERATION FROM HANDHELD-CAMERA SEQUENCE(International Workshop on Advanced Image Technology 2006)
- SEE-THROUGH VEHICLES : DRIVING ASSISTANCE AT AN INTERSECTION USING AN INFRASTRUCTURE CAMERA(International Workshop on Advanced Image Technology 2006)
- EXPERIMENT ON A CROSSING TURN ASSISTANCE SYSTEM IN REAL INTERSECTION ENVIRONMENT
- B-11-4 自由視点映像通信におけるネットワーク遅延が視点変更に及ぼす影響(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-6 嗅覚及び触覚メディア伝送におけるメディア間同期誤差とQoEとの関係(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-7 力覚メディア・ビデオを用いた遠隔制御システムのQoE評価 : ネットワーク遅延変動の影響(B-11.コミュニケーションクオリティ,一般セッション)
- View Synthesis Using Probabilistic Reliability Reasoning for FTV
- 可視光通信のための高速度カメラ画像処理を用いたLED信号機検出
- ダウンサンプリングと画像ベースアップサンプリングを用いる奥行き符号化
- A Semi-Automatic Depth Estimation Method for FTV
- Traffic sign detection and tracking based on shape and color information (ITS研究会 ITS,道路交通におけるセンシング,通信,処理)
- 嗅覚及び触覚メディア間の同期誤差とQoEとの関係(ユビキタス/ブロードバンドネットワーク品質,サービス品質,品質評価モデル,信頼性とセキュリティ,コンテンツ配信,一般)
- 自由視点映像通信におけるQoE評価 : ネットワーク遅延が視点変更に及ぼす影響(五感メディアの品質,コミュニケーションデザイン,画像符号化,食メディア,一般)
- 力覚を利用したネットワーク型リアルタイムゲームにおける共有オブジェクトの管理者の決定方法がQoEに及ぼす影響(ユビキタス/ブロードバンドネットワーク品質,サービス品質,品質評価モデル,信頼性とセキュリティ,コンテンツ配信,一般)
- SfM位置推定による静的シーンの自由視点画像生成(画像符号化,通信・ストリーム技術,一般)
- 動物体抽出を用いた自由視点画像合成(画像符号化,通信・ストリーム技術,一般)
- SfM位置推定による静的シーンの自由視点画像生成(画像符号化,通信・ストリーム技術,一般)
- 動物体抽出を用いた自由視点画像合成(画像符号化,通信・ストリーム技術,一般)
- 多地点間における音声・ビデオを用いた合唱のQoE評価(画像符号化,通信・ストリーム技術,一般)
- 多地点間における音声・ビデオを用いた合唱のQoE評価(画像符号化,通信・ストリーム技術,一般)
- ハイブリッドカメラシステムを用いた交通標識の認識
- ハイブリッドカメラシステムを用いた交通標識の認識
- Traffic Sign Detection and Tracking Based on Shape and Color Information
- B-11-14 力覚メディア・ビデオを用いた遠隔制御システムにおける作業のしやすさのQoE評価(B-11. コミュニケーションクオリティ,一般セッション)
- 前進視点における自由視点画像生成(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- 移動カメラアレーを用いた時空間の自由視点画像生成(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- Depth Image Based Renderingのための奥行画像へのポストフィルタリング(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- カメラと鏡を用いた多点光線取得システム(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- 嗅覚・力覚を利用した遠隔生け花システムにおける生徒に対するアンケート調査と香り空間の大きさの影響(映像/音声サービスの品質,メディア品質,ネットワークの品質・QoS制御,次世代/新世代ネットワークアーキテクチャ,災害時のネットワークとコミュニケーション,一般)
- 遠隔教育システムにおける力覚の制御方式の比較(モバイル/放送融合技術・システムおよびアプリケーション,モバイルコンテンツ配信,P2P/アドホックネットワーク,及びこれらの品質,一般)
- 遠隔教育システムにおける力覚の制御方式の比較 (放送技術 コンシューマエレクトロニクス)
- 入力・出力 自由視点映像伝送におけるユーザ体感品質評価 : ネットワーク遅延の影響
- 自由視点映像伝送におけるネットワーク遅延がユーザ体感品質に及ぼす影響
- B-11-22 力覚メディア・ビデオを用いた遠隔制御システムにおけるQoE評価 : 反力の適応制御の効果(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-9 立体映像通信におけるスライス数がQoEに及ぼす影響(B-11.コミュニケーションクオリティ,一般セッション)
- B-11-8 自由視点立体映像伝送におけるQoE評価 : ネットワーク遅延の影響(B-11.コミュニケーションクオリティ,一般セッション)
- 立体映像通信における誤り補償の効果(ネットワーク管理,ネットワーク品質,一般)
- ネットワーク型ゲームにおける香りが利用者に届くまでの時間が公平性に及ぼす影響(実世界センシングとその応用)
- 重み付きクロスバイラテラルフィルタによる奥行き推定精度の向上
- 奥行画像符号化のための重み付きジョイントバイラテラルアップサンプリングによる超解像(研究速報,映像メディア処理,画像符号化・映像メディア処理レター)
- Quality of Experience Assessment of Dynamic Output Timing Control of Fragrance in Networked Virtual Environment
- 分散仮想環境における香りの出力タイミングの動的制御(サービス品質,クラウド,SDN(Software-Defined Network),コンテンツ配信,一般)
- 多地点間の合唱におけるメディア同期のユーザ体感品質評価
- Depth Coding using Downsampling and View based Upsampling
- I-074 Road-to-vehicle Visible Light Communication Using High-speed Camera in Driving Situation
- LED Traffic Light Detection Using High-speed-camera Image Processing for Visible Light Communication
- ハイブリッド型P2Pネットワークにおけるピアの通信速度を考慮した複製分割配置型コンテンツ共有手法の検討 (ネットワークシステム)
- D-11-2 An Incoherent Dictionary Learning Model for Sparse Representation of EPI