高遅延環境における分散ファイルシステムHadoopの遠隔データアクセス特性の評価(一般セッション,大規模マルチメディアデータを対象とした次世代検索およびマイニング)
スポンサーリンク
概要
- 論文の詳細を見る
情報爆発の現代において大きな障害となる企業や個人のデータ処理の負荷とストレージコストの増加の問題に対して,汎用のハードウェアを用いて高度な集約処理を行う分散ファイルシステムに注目が集まっている.なかでもファイルの一部が遠隔地に存在するシステムなどに見られる近接/遠隔ネットワークを併用する広域分散ファイルシステムの運用は,インターネット回線の高速化などネットワーク網の発展に伴い近年その需要を拡大している.本研究ではこうした分散ファイルシステムの実装としてHadoopを取り上げ,高遅延環境において遠隔データアクセス頻度を制御した際の性能評価やパケット解析を行うことによって,広域分散ファイルシステムにおける遠隔データアクセスの特性に関する検討を行う.
- 2011-05-30
著者
関連論文
- ATM結合PCクラスタにおける動的リモートメモリ利用方式を用いた並列データマイニングの実行
- 並列DBMSに於ける動的負荷分散機構の実装
- 大規模PCクラスタにおける並列相関ルールマイニング処理方式の評価
- ATM結合PCクラスタにおける並列データマイニングの実装とTCP再送機構の性能解析
- 仮想マシンPCクラスタにおける並列データ処理アプリケーション実行時のストレージアクセスに関する一検討(ストレージアクセス技術,2009年並列/分散/協調処理に関する『仙台』サマー・ワークショップ(SWoPP仙台2009))
- iSCSI遠隔ストレージアクセスにおけるVPN経路接続を用いた場合の性能に与える影響の評価(ストレージアクセス技術,2009年並列/分散/協調処理に関する『仙台』サマー・ワークショップ(SWoPP仙台2009))
- メタバースサービスにおける高負荷時のレスポンスに関する検討(コンピュータシステム技術,2009年並列/分散/協調処理に関する『仙台』サマー・ワークショップ(SWoPP仙台2009))
- iSCSIリモートストレージアクセスの性能向上を実現する手法の提案と実装(ネットワーク,クラウド及び一般)
- 無線LAN上のデータ転送時のTCPパラメータの一解析(データ応用,夏のデータベースワークショップDBWS 2006)
- 無線LAN上のデータ転送時のTCPパラメータの一解析(データ応用)
- 輻輳ウィンドウ及びパケット解析を用いたiSCSI遠隔ストレージアクセスの評価(遠隔データアクセス,ネットワーク技術及び一般)
- iSCSIネットワークストレージにおけるファイルアクセス性能に関する考察(ストレージ2, 夏のデータベースワークショップDBWS2005)
- iSCSIネットワークストレージにおけるファイルアクセス性能に関する考察(ストレージ2, 夏のデータベースワークショップ2005)
- SAN結合PCクラスタにおけるストレージ仮想化機構を用いた動的負荷分散並びに動的資源調整の提案とその評価(データベース)
- 無線LANマルチホップ環境下における階層プロトコル上のパケットトレース(ITSコア技術・ショーケース・一般)
- iSCSIストレージアクセスにおけるTCPふくそうウインドウコントロール手法の提案と性能評価(ストレージ技術,データ工学論文)
- マルチホップネットワークにおける汎用OSを用いたセキュリティ機構の応答性制御方式(ネットワークセキュリティ,ネットワーク技術及び一般)
- 仮想マシンマイグレーションによるストレージアクセス最適化に関する性能評価(ネットワーク,クラウド及び一般)
- 6ZA-7 ユビキタスデータ処理VPN環境の構築手法に関する検討(マルチメディア通信,学生セッション,ネットワーク)
- 1S-6 PLC/無線LAN経由P2P通信におけるトラフィック特性の性能評価(P2Pデータ処理,学生セッション,データベースとメディア)
- 2ZK-1 マルチコア・仮想マシン環境におけるIP-SANアクセスの性能評価(情報爆発時代におけるコンテンツ格納手段,学生セッション,「情報爆発」時代に向けた新しいIT基盤技術)
- L_077 無線LAN通信時におけるTCPパラメータの振舞とパケット転送タイミングの解析(L分野:ネットワークコンピューティング)
- ATM結合PCクラスタのTCP再送機構の解析と並列データマイニングの性能向上
- Android端末の無線LAN通信時のトランスポート層の振舞に関する一検討
- データインテンシブアプリケーション実行時におけるクラウドリソースへの負荷分散ミドルウェア
- データインテンシブアプリケーション実行時におけるクラウドリソースへの負荷分散ミドルウェア
- IEEE802.11無線LANにおける帯域公平性の問題の検討
- 広域分散ファイルシステムにおける遠隔データアクセスに関する一考察
- データインテンシブアプリケーション実行時におけるクラウドリソースへの負荷分散ミドルウェア
- 共有ストレージプールを用いた並列データベース処理に於けるオンデマンド資源調節
- 共有ストレージプールを用いた並列データベース処理に於けるオンデマンド資源調節
- 4K-5 並列DBMS: DBKernelにおける動的負荷分散機構の評価
- 並列DBMSに於ける動的負荷分散機構の実装
- 並列DBMSにおける動的負荷分散機構 : 負荷情報収集方式の検討
- 並列DBMSにおける動的負荷分散機構 : 負荷情報収集に関する一考察
- 並列関係データベース処理システムに於ける動的負荷分散:実装設計
- 3Z-7 マルチホップネットワークにおける応答時間を考慮したセキュリティ実現方式の一検討(ネットワークセキュリティ,学生セッション,ネットワーク)
- 分散型メタバースサーバのログインタイム短縮に関する一検討
- データ処理アプリケーションのクラウドリソースとローカルクラスタ間における負荷分散ミドルウェアの検討(2010年並列/分散/協調処理に関する『金沢』サマー・ワークショップSWoPP2010)
- 異なるパラメータにおけるアプリケーションの無線LAN上におけるトラヒック解析(2010年並列/分散/協調処理に関する『金沢』サマー・ワークショップSWoPP2010)
- iSCSIストレージの各層最適化時のVPN遠隔接続環境における性能向上の検討(2010年並列/分散/協調処理に関する『金沢』サマー・ワークショップSWoPP2010)
- 分散型メタバースサーバにおけるサービス提供時の動作解析(2010年並列/分散/協調処理に関する『金沢』サマー・ワークショップSWoPP2010)
- Android 端末の無線LAN通信時のトランスポート層の振舞に関する一検討
- 複数インタフェースを用いた無線通信のコネクション集約ミドルウェア
- iSCSI遠隔ストレージアクセスにおけるパケット送信処理のカーネルモニタを用いた動作解析
- IEEE802.11無線LANにおける帯域公平性の問題の検討
- 6ZA-1 無線通信環境におけるQoS保証TCPの動作に関する一検討(マルチメディア通信,学生セッション,ネットワーク)
- 1ZP-5 Androidの無線LAN通信性能に関する一検討(情報爆発時代におけるネットワーク技術,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 移動端末におけるQoS保証TCPの特性評価(ネットワーク品質,トラヒック計測,一般)
- 複数無線インタフェース使用時のミドルウェアにおけるバッファ量の評価(ネットワーク品質,トラヒック計測,サービス品質,一般)
- SAN結合PCクラスタ上の並列データマイニングのための動的データ・デクラスタリング
- SAN結合PCクラスタ上の並列データマイニングのための動的データ・デクラスタリング
- 通信プロトコルのパラメータチューニングによる大規模PCクラスタの性能向上
- 大規模PCクラスタにおける並列集約演算の高速化
- ATM結合型大規模PCクラスタにおける並列データマイニングとTCP再送機構の解析
- 大規模PCクラスタ仁おける並列関係問合せ実行方式とその評価
- 大規模PCクラスタ仁おける並列関係問合せ実行方式とその評価
- VPNを利用したIPストレージへの複数経路アクセス制御手法の提案(ネットワーク技術,わくわくする先端的コンピュータシステム技術と一般)
- M-036 IPストレージに対するWebベースのアクセスモデルの提案(M分野:ユビキタス・マルチメディア・セキュリティ)
- 1ZP-1 複数無線インタフェース使用時のネットワーク層におけるコネクション集約に関する評価(情報爆発時代におけるネットワーク技術,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 5ZP-3 分散ファイルシステムHadoopの広域環境への適用(情報爆発時代におけるストレージ管理,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 2ZK-6 MANETにおけるモバイルDBデータ高度処理のためのフレームワークの提案およびミドルウェア実装(情報爆発時代におけるコンテンツ格納手段,学生セッション,「情報爆発」時代に向けた新しいIT基盤技術)
- 1ZP-4 無線LAN環境におけるアクセスポイントのバッファ量と帯域不公平性の評価(情報爆発時代におけるネットワーク技術,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 1ZP-3 ライフログ収集のためのセンサネットワークと画像ストリーム環境の構築(情報爆発時代におけるネットワーク技術,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- IP-SAN統合型PCクラスタにおける並列データ処理アプリケーション実行時の特性解析(分散システム,ネットワーク技術及び一般)
- 2ZK-4 並列データマイニング実行時のIP-SAN統合型PCクラスタの動作解析(情報爆発時代におけるコンテンツ格納手段,学生セッション,「情報爆発」時代に向けた新しいIT基盤技術)
- 2ZK-2 iSCSI遠隔ストレージアクセス時のTCPの振舞に関する一検討(情報爆発時代におけるコンテンツ格納手段,学生セッション,「情報爆発」時代に向けた新しいIT基盤技術)
- クラスタシステムにおけるIP-SANを用いたI/O処理の並列ベンチマークによる評価(HPC-13 : 通信II)
- 高遅延環境下におけるIP-SANを用いた暗号処理最適化手法の実装と評価(データベース)
- iSCSIを用いたPCクラスタにおけるバックエンドネットワーク統合による性能への影響評価(仮想化・I/O統合技術,わくわくする先端的コンピュータシステム技術と一般)
- D_015 IP-SAN統合PCクラスタにおけるNPB実行性能比較(D分野:データベース)
- IP-SAN統合PCクラスタを用いたトラヒック特性とI/O性能に関する考察(ストレージ,夏のデータベースワークショップDBWS 2006)
- IP-SAN統合PCクラスタを用いたトラヒック特性とI/O性能に関する考察(ストレージ)
- B-026 iSCSIリモートストレージアクセス時における暗号処理最適化手法の複数プロセスを使用した性能評価と考察(B分野:ソフトウェア)
- iSCSIストレージアクセス時の3DESアルゴリズムを用いた上位層における暗号化適用方式の実装およびIPsecとの性能比較(IPストレージ, SWOPP武雄2005 (2005年並列/分散/協調処理に関する「武雄」サマー・ワークショップ))
- LD-003 IP-SANを利用したセキュアなストレージアクセスにおける性能向上手法の提案と検討(D. データベース)
- iSCSIストレージアクセスにおける安全な通信を行うシステムソフトウェアの検討(OS-4:ストレージと自律管理)(2004年並列/分散/協調処理に関する『青森』サマー・ワークショップ(SWoPP青森2004) : 研究会・連続同時開催)
- B-16-10 IPsecを利用したiSCSIネットワークにおけるシーケンシャルアクセスの考察(B-16. インターネットアーキテクチャ)
- 5ZP-6 仮想マシンクラスタにおけるリソースの負荷バランスに関する一考察(情報爆発時代におけるストレージ管理,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 5ZP-5 iSCSI遠隔ストレージアクセスにおける各層最適化時のVPN環境への適用(情報爆発時代におけるストレージ管理,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 5ZP-4 iSCSI遠隔ストレージアクセスの性能向上を実現する汎用的な最適化手法とその評価(情報爆発時代におけるストレージ管理,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- D-036 トレースシステムを用いたIP-SANにおけるファイル操作性能に関する解析(D分野:データベース)
- トレース解析システムによるIP-SANの性能向上(ネットワークストレージシステム及び一般)
- iSCSIストレージアクセスのトレースシステム(ストレージ1)(夏のデータベースワークショップDBWS2004)
- iSCSIストレージアクセスのトレースシステム(セッション6C : ストレージ1)(夏のデータベースワークショップ : DBWS2004)
- 大規模PCクラスタにおけるトランスポーズドファイルを用いた並列関係問合せ処理
- ATM結合PCクラスタにおける並列関係問合せ処理系の設計と実装
- ATM 結合 PC クラスタ上での並列関係データベースサーバの構築
- ATM結合型PCクラスタにおける並列相関関係抽出
- ATM結合型PCクラスタによる並列データマイニング (時空間データベースおよび一般)
- iSCSI解析システムの構築と高遅延環境におけるシーケンシャルアクセスの性能向上に関する考察(ストレージ技術)
- 1ZP-2 複数無線通信方式使用時の制御手法に関する一検討(情報爆発時代におけるネットワーク技術,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- VPN複数経路接続時におけるiSCSIストレージアクセスの性能評価
- 2ZK-5 PCクラスタを利用したバイオインフォデータマイニング(情報爆発時代におけるコンテンツ格納手段,学生セッション,「情報爆発」時代に向けた新しいIT基盤技術)
- 2ZK-3 VPN複数経路接続時における並列ストレージアクセスの動作解析(情報爆発時代におけるコンテンツ格納手段,学生セッション,「情報爆発」時代に向けた新しいIT基盤技術)
- マルチホップネットワークにおけるセキュアな通信路構築に関する制御手法(ITSコア技術・ショーケース・一般)
- L-030 有線及び無線リンク経由の通信におけるIPsec適用手法の一検討(L分野:ネットワークコンピューティング)
- BS-5-16 移動通信時におけるQoS-TCPの性能評価とTCPの動作解析(BS-5.無線・有線シームレス統合時代の品質制御・ネットワーク制御に関する萌芽的技術,シンポジウムセッション)
- Android端末における通信性能の可視化ツール
- 移動端末から送出する固定ビットレートデータのための帯域確保型TCPの性能評価