GEO Grid の構築に向けたストレージシステムの予備評価(HPC-16 : 性能評価)
スポンサーリンク
概要
- 論文の詳細を見る
衛星観測した数百TBのデータをオンラインのハードディスクに保管し,必要に応じていつでも参照できる環境の整備が求められている.そのバックエンドとなるストレージは,大規模データの保存とそれらの高速処理を実現するシステムでなくてはならない.そのようなシステムを検討するために,ASTER衛星データとそのアプリケーションを例に,GfarmとLustreを用いて同等のシステムを構築した場合のデータアクセスの性能と運用方法を比較した.性能面ではASTERアプリケーションのデータ処理を解析した上で,各ストレージシステムでのアプリケーションの実行性能を比較した.運用面では故障に対する備え方,メンテナンスの作業内容や課題を比較した.これらの調査により,より大規模な衛星観測データの保存システム,あるいは類似アプリケーションのためのストレージを構築するための指針を得た.
- 一般社団法人情報処理学会の論文
- 2007-08-01
著者
-
山本 直孝
産業技術総合研究所
-
谷村 勇輔
産業技術総合研究所
-
田中 良夫
産業技術総合研究所
-
関口 智嗣
産業技術総合研究所
-
中田 秀基
産業技術総合研究所
-
関口 智嗣
電子技術総合研究所
-
関口 智嗣
独立行政法人産業技術総合研究所
-
山本 直孝
東京理科大学
-
関口 智嗣
産業技術総合研
-
関口 智嗣
産業技術総合研究所グリッド研究センター
-
中田 秀基
電総研
-
田中 良夫
産業技術総合研 情報技術研究部門
-
山本 直孝
産業技術総合研究所情報技術研究部門
-
Sekiguchi Satoshi
Department Of Veterinary Pathology Nippon Veterinary And Animal Science University
-
石橋 拓也
株式会社創夢
-
中田 秀基
産業技術総合研
-
田中 良夫
産業技術総合研
関連論文
- 分散環境下における情報システムの信頼性(ストレージの信頼性)
- Cell/B.E.プロセッサによるステレオマッチングソフトウェアの高速化(最適化・高速化)
- 高品質分散実行環境のための計算・ネットワーク資源のグローバルスケジューリング手法(ネットワーク,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2009))
- 予約利用可能なオブジェクトベース・ストレージの設計(ストレージシステム,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2009))
- Relis-G : 計算グリッドのための遠隔ライブラリインストール機構(グリッド)
- GridRPCシステムにおけるリモートプログラムシッピング機構(グリッド)
- GridRPCシステムにおけるリモートプログラムシッピング機構
- Tsukuba-GAMA : E-サイエンス基盤のためのユーザ管理システムの設計と実装(グリッド)
- Tsukuba-GAMA--e-サイエンスのためのユーザ管理システムの設計と実装 (システム開発論文特集)
- MapReduceにおけるRDF-DB処理に適したデータ分散格納方法の提案(HPC-14:分散処理,2008年並列/分散/協調処理に関する『佐賀』サマー・ワークショップ(SWoPP佐賀2008))
- 分散RDFデータベースに関する研究(jDBワークショップ)
- GEO Grid : 地球観測グリッドの設計と実装(分散処理とシステムソフトウェア)
- GridFMO : グリッド環境を用いた大規模量子化学計算(グリッド)
- グリッドにおける計算資源と光パスネットワーク資源のコアロケーション実験(グリッド,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2006))
- グリッドにおける計算資源と光パスネットワーク資源のコアロケーション実験(グリッド, 「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2006))
- A05 GEO Grid火山重力流シミュレーションシステム : 次世代リアルタイムハザードマップの試み(火山防災と教育,日本火山学会2008年秋季大会)
- Access Gridの構築とGrid上での国際会議
- Tsukuba-GAMA: e-サイエンスのためのユーザ管理システムの設計と実装(支援・管理システム,システム開発論文)
- 複数拠点にまたがるe-Scienceアプリケーション環境構築を目的としたソフトウェア導入・管理機構(並列・分散システム,システム開発論文)
- WSRFに基づく情報サービスのXACMLによるアクセス制御(HPC-17 : グリッド)
- ステートレス仮想クラスタの構想(クラスタと省電力技術)
- 仮想クラスタ管理システムの設計と実装(仮想化)
- オーバーレイスケジューラJojo3のグリッドRPCへの適用(HPC-6:グリッド,2008年並列/分散/協調処理に関する『佐賀』サマー・ワークショップ(SWoPP佐賀2008))
- オーバレイスケジューラJojo3の提案(Grid,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2008))
- Ninf-G2の性能評価 : 科学技術計算における事例(HPC-2 : グリッド(1))(2004年並列/分散/協調処理に関する『青森』サマー・ワークショップ(SWoPP青森2004) : 研究会・連続同時開催)
- グリッドチャレンジテストベッドの構築と運用 : グリチャレテストベッドの作り方(HPC-3 : 大規模運用システム(1))
- 複数ドメイン環境でQoSを保証するクラウドのための資源管理フレームワーク(クラウド、グリッド・P2P)
- グリッド環境下における並列分子動力学ポータルサイトの構築(グリッド)
- グリッド環境下における並列分子動力学ポータルサイトの構築
- Sun Fire X4500とGfarmを用いた大規模ストレージの構築(グリッドI)
- GridRPCを用いたタスクファーミングAPIの試作(グリッド)
- Gridポータル構築ツールキット Ninf-Portal
- Grid RPCシステムのAPIの提案
- 事前予約機構のポリシ記述による制御(グリッドと数値計算)
- グローバルスケジューリングのためのローカル計算資源管理機構
- 事前予約機能を持つローカルスケジューリングシステムの設計と実装(ジョブスケジューリング,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2006))
- オーバレイスケジューラJojo3の提案(Grid,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2008))
- Grid PSE Builder: グリッドにおける汎用PSE構築ツールの開発(HPC-5 : グリット(1))(2003年並列/分散/協調処理に関する『松江』サマー・ワークショップ(SWoPP松江2003))
- 性能を保証する分散実行環境のためのオンラインコアロケーション手法
- クラウドコンピューティングの性能評価
- クラウドコンピューティングの性能評価
- 異なるアーキテクチャのメニーコアプロセッサにおけるステレオマッチングプログラムの高速化と性能評価
- 匿名性と不正者の特定を両立させるP2P環境用認証方式(セキュリティ)
- 匿名相互証明書とP2P通信を用いる認証方式(OS-1: セキュリティ, 2005年並列/分散/協調処理に関する『武雄』サマー・ワークショップ(SWoPP武雄2005)-研究会・連続同時開催-)
- 気象予報グリツドポータルの開発
- OpenGRコンパイラの設計および開発
- GlobusによるGrid RPCシステムの実装と評価
- ホモジニアス・ヘテロジニアスマルチコアによるDEM生成の高速化と性能評価
- ホモジニアス・ヘテロジニアスマルチコアによるDEM生成の高速化と性能評価
- 資源予約と連携した階層型分散資源モニタリングシステムの設計(クラスタとグリッド技術)
- 実大三次元振動実験のためのデータリポジトリシステムの設計(グリッド,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2006))
- 実大三次元振動実験のためのデータリポジトリシステムの設計(グリッド, 「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2006))
- グリッドRPCシステムのクラウド環境への適用
- WSRFに基づく情報サービスのXACMLによるアクセス制御
- 複数サイトにまたがる仮想クラスタの構築(HPC-14 : 分散処理)
- Access Gridの構築とGrid上での国際会議
- Network Enabled ServerのWorld-wide Gridにおける性能
- アクセス性能を保証する並列ファイルシステムの提案とストレージサーバの設計
- 予約利用可能なオブジェクトベース・ストレージの設計(ストレージシステム,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2009))
- グリッドコンピューティングにおけるセキュリティモデル : NAREGIにおける実装例の報告(インターネット及び一般)
- グリッドコンピューティングにおけるセキュリティモデル : NAREGIにおける実装例の報告(インターネット及び一般)
- 超大規模材料シミュレーションのためのAsia-Pacific GRID戦略的活用構想(計算力学・工学におけるマルチスケールモデリング,理学と工学,科学と技術をつなぐマルチスケールモデリング)
- 大規模資源の管理・制御に関する技術の実証実験 : 新世代ネットワークプラットフォームの実現に向けて(ネットワーク品質,トラヒック計測,サービス品質,一般)
- 超高精細映像配信サービスのためのストレージ・ネットワーク統合資源管理方式の提案(ブロードバンドアクセス,ホームネットワーク,ネットワークサービス,通信利用アプリケーション,一般)
- 仮想クラスタに対するIPストレージの提供方法の比較(仮想クラスタ,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2007))
- 仮想クラスタに対するIPストレージの提供方法の比較(仮想クラスタ,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2007))
- ホモジニアス・ヘテロジニアスマルチコアによるDEM生成の高速化と性能評価
- ホモジニアス・ヘテロジニアスマルチコアによるDEM生成の高速化と性能評価
- 性能を保証する計算・ネットワーク資源のコアロケーション手法の評価
- 高品質分散実行環境のための計算・ネットワーク資源のグローバルスケジューリング手法(ネットワーク,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2009))
- Grid : 広域分散並列処理環境での高精度分子シミュレーション : C_分子のレプリカ交換モンテカルロ(グリッド応用)
- PluS予約機構のCondorへの適用(通信とグリッドII)
- グローバルスケジューリングのための計算資源予約管理機構(グリッド)
- 事前予約機能を持つローカルスケジューリングシステムの設計と実装(ジョブスケジューリング, 「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2006))
- 地球観測グリッドにおけるセキュリティ基盤の設計と実装
- Globus Toolkit 4におけるWSRFサービス記述のアノテーションによる補助(HPC-17 : グリッド)
- 動的に計算量が変化する大規模長時間実行Gridアプリケーションの実現(グリッド)
- MPIとGridRPCを利用した大規模Gridアプリケーションの開発と実行:Hybrid QM/MDシミュレーション(グリッドアプリケーション)
- Ninf-G2 : 大規模Grid環境での利用に即した高機能,高性能GridRPCシステムの実装と評価(グリッド)
- Ninf-G version2の実装および性能評価(グリッド基盤システム)
- Grid環境上における気象予報シミュレーションシステムの構築(グリッド応用)
- 地球観測グリッドシステム(GEO Grid):情報統合の新展開 (特集:地質情報整備の現状と将来(その2))
- Ninf-G2: 大規模環境での利用に即した高機能,高性能GridRPCシステム(HPC-5 : グリット(1))(2003年並列/分散/協調処理に関する『松江』サマー・ワークショップ(SWoPP松江2003))
- 耐障害性を考慮したNinf-Gアプリケーションの実装と評価(グリッド)
- オーバレイ構築ツールキットOverlay Weaver(インターネットシステム)
- 計算機資源の流通および集約のためのP2Pミドルウェア(グリッドシステム)
- グリッドRPCシステムNinf-Gの可搬性および適応性の改善(数値計算とコンパイラ)
- GEO Grid の構築に向けたストレージシステムの予備評価(HPC-16 : 性能評価)
- Grid Datafarmにおける天文学データ解析ツールの性能評価(HPC-12 : グリッド(3))(2003年並列/分散/協調処理に関する『松江』サマー・ワークショップ(SWoPP松江2003))
- SSDを用いたオブジェクトベース・ストレージデバイスのI/O性能制御
- グリッドRPCシステムNinf-Gのリモート起動手法の改良(Session 3:Cluster/Grid)
- GridRPCにおける複数ノードにまたがるTask Sequencingの実現(グリッド)
- 分散RDFデータベースに関する研究(jDBワークショップ)
- GridRPCを用いたタスクファーミングAPIの設計と実装(HPC-4: グリッド)
- GridRPCシステムの比較 : アプリケーション開発における違い(グリッド(2), 「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2005))
- P018 月・惑星データ協働解析システム(WISE-CAPS)と月面地名検索システムの現状報告(ポスターセッション2)
- 320 月・惑星探査データをベースにした協働解析環境の構築(オーラルセッション11 固体天体の科学・惑星探査II)
- GridRPCシステムの比較 : アプリケーション開発における違い(グリッド(2), 「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2005))
- 月・惑星探査データ表示・解析システム「WISE-CAPS」(宇宙科学情報解析論文誌 第二号)
- 32.250mメッシュVs30と強震記録に基づく地震動マップの即時推定システム(QuiQuake)