異機種計算機間通信ライブラリStampiにおける並列I/O機能の実装
スポンサーリンク
概要
- 論文の詳細を見る
我々は異機種並列計算機環境における分散並列I/OライブラリとしてMPI-2の仕様に基づいたStampi-I/OをStampiの通信基盤を用い開発した。科学技術計算分野でのアプリケーションでは大規模なデータを扱う傾向にあり、そのような大規模データを効率的に管理する為に分散並列I/O機能が必要となってきた。このような状況に対し、複数の計算機間に効率的に分散して大規模データを管理するために、分散並列I/OライブラリStampi-I/Oを開発した。今回は開発の基礎となる機能のみに限定した開発及び性能評価を行なった。本稿では、Stampi-I/Oを開発する目的、システムの構成、現状、性能評価テストそして将来の構築予定について述べる。
- 一般社団法人情報処理学会の論文
- 2000-12-08
著者
-
武宮 博
日本原子力研究開発機構
-
今村 俊幸
日本原子力研究所
-
辻田 祐一
近畿大学工学部電子情報工学科
-
辻田 祐一
日本原子力研究所 計算科学技術推進センター
-
山岸 信寛
日本原子力研究所 計算科学技術推進センター
-
武宮 博
日本原子力研究所計算科学技術推進センター : 日立東北ソウトウェア
-
今村 俊幸
電気通信大学情報理工学部:crest (jst)
-
今村 俊幸
理化学研究所計算科学研究機構|crest(jst)
-
武宮 博
日本原子力研究所 計算科学技術推進センター
関連論文
- 量子多体系・高精度シミュレーションの研究開発 : 密度行列繰り込み群法の超並列化と大規模計算
- LOBPCGにおける段階的収束とwindowの効果について(HPC-7:自動チューニングII,2008年並列/分散/協調処理に関する『佐賀』サマー・ワークショップ(SWoPP佐賀2008))
- Cell BEによる粒子法の並列化(アプリケーション高速化,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2008))
- 多重スケール解析による霧状液体の可視化
- ITBLクライアントAPIを用いた原子力材料シミュレーション実行環境構築(プログラミング環境,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2008))
- オントロジー指向アーキテクチャーによる認識処理手法の基礎的検討 (知能ソフトウェア工学)
- 科学概念語彙モデルを用いた物理シミュレーションにおける意味情報処理
- 時空間データの可視化 (第38回可視化情報シンポジウム講演論文集) -- (オーガナイズドセッション ビジュアルデータマイニング(1))
- マルチコア環境における固有値ソルバ
- 疎行列固有値ソルバーの自動チューニングLOBPCGの量子多体問題への応用を中心に(HPC-10 : 自動チューニングI)
- 密度行列繰り込み群法における大規模固有値計算の並列化 (数値解析と数値計算アルゴリズムの最近の展開)
- 1p-P-5 トカマク・プラズマにおけるハイブリッド・シミュレーション
- マルチスレッドによるTwo-Phase I/Oの高速化の検討
- 気象予報グリツドポータルの開発
- Cell BEによる粒子法の並列化(アプリケーション高速化,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2008))
- オントロジー指向アーキテクチャーによる認識処理手法の基礎的検討(一般セッション)
- 途切れの無い思考を支援するプログラミング環境STAの構築
- 緊急時放射能放出源推定システムの広域分散計算環境への実装とその実時間可視化
- 2L-3 並列ファイルシステムにおけるハードディスクの簡易的な温度トレース機能の実装(並列システムソフトウェア,学生セッション,アーキテクチャ,情報処理学会創立50周年記念)
- オントロジー指向アーキテクチャーによる認識処理手法の基礎的検討(一般セッション,一般,フレッシャーズセッション)
- Windowsクラスタの利用を支援する計算環境構築の取り組み(計算環境)
- ITBLクライアントAPIを用いた原子力材料シミュレーション実行環境構築(プログラミング環境,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2008))
- 14.ITBLを用いた原子力材料シミュレーション環境構築の取り組み
- Parallel netCDFインタフェースによる計算機間集団型入出力機能の実装(Session 3:Cluster/Grid)
- PVFSを用いた計算機間MPI-I/O機能の最適化
- Parallel netCDFインタフェースによる計算機間入出力操作の試み(HPCシステム)
- PVFSを用いた計算機間MPI-I/O機能の実装と性能評価(通信ライブラリ, 「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2005))
- PVFSを用いた計算機間MPI-I/O機能の実装と性能評価
- 異機種計算機間通信ライブラリStampiにおける非同期I/O操作(ストレージシステムと入出力)
- 異機種計算機間MPI通信ライブラリStampiによるVPNを介したSCoreクラスタシステム間通信性能評価(高性能計算及び一般)
- 並列分散科学技術計算用I/Oライブラリ Stampi-I/O の開発
- 異機種計算機間通信ライブラリStampiにおける並列I/O機能の実装
- ワールドワイドメタコンピューティングの試みについて
- ワールドワイドメタコンピューティングの試みについて
- スーパーコンピュータ・クラスター上の並列分散アプリケーション : 核融合プラズマ実験解析のための並列分散処理システムの構築
- 異機種並列計算機間の通信を支援する並列分散通信ライブラリ : Stampi
- 22pZD-4 箱型トラップ中でのFFLO状態と強結合の効果(22pZD 量子エレクトロニクス(Fermi原子系の理論),領域1(原子・分子,量子エレクトロニクス,放射線物理))
- マルチコアクラスタ向け通信手法を用いた密度行列繰り込み群法の並列化
- 時空間マップによる時系列データの可視化
- 並列分散科学技術計算環境STA(4) : 異機種並列計算機の統合利用環境の構築
- 並列分散科学技術計算環境STA(3) : 異機種並列計算機間通信ライブラリの構築
- 並列分散科学技術計算環境STA(2) : エディタを中心に統合された並列プログラム開発環境PPDEの構築
- 並列分散科学技術計算環境STA(1) : 目的及び概要
- 異機種並列分散コンピューティングのためのメタ・スケジューリングの構想
- 4D-3 認識能力を備えたデータ解析システム(人工知能(2),一般セッション,人工知能と認知科学)
- トカマクプラズマ計算(NEXT)における異機種並列計算機を結合したハイブリッドコンピューティング
- Grid : 広域分散並列処理環境での高精度分子シミュレーション : C_分子のレプリカ交換モンテカルロ(グリッド応用)
- 並列分散科学技術計算の支援環境--SSP
- 複数の並列計算機上での科学技術計算のための統合利用環境の構築
- 粒子輸送モンテカルロコードの高並列処理 : EGS4コートの並列化
- 粒子輸送モンテカルロコードの高並列処理
- 科学概念語彙モデルを用いた物理シミュレーションにおける意味情報処理
- 並列科学計算のための可視化解析システムの開発
- 動的に計算量が変化する大規模長時間実行Gridアプリケーションの実現(グリッド)
- MPIとGridRPCを利用した大規模Gridアプリケーションの開発と実行:Hybrid QM/MDシミュレーション(グリッドアプリケーション)
- Ninf-G2 : 大規模Grid環境での利用に即した高機能,高性能GridRPCシステムの実装と評価(グリッド)
- Ninf-G version2の実装および性能評価(グリッド基盤システム)
- Grid環境上における気象予報シミュレーションシステムの構築(グリッド応用)
- サービス統合化アーキテクチャの提案
- 共同可視化解析支援システムの提案
- 分散可視化システムへのビュー概念の導入
- 科学計算分散可視化システムにおける対話機能
- データ可視化処理用部品を用いたユーザインタフェースの試作
- 分散環境に対応した数値シミュレーション可視化システム
- 自律分散環境における協調型計算モデル : 協調スコープによる協調動作の記述
- 自律分権協調概念に基づく計算モデルKemari
- 並列処理関数に着目した関数型言語FPのベクトル処理方法
- 関数型言語FPのベクトルプロセッサ向きコンパイル手法
- 可視化デバッガ : Vdebug の開発
- 資源情報サーバにおける資源情報予測の評価
- メタスケジューリングのための資源情報サーバの構築
- 並列分散科学技術計算環境STA (Seamless Thinking Aid)
- 並列分散科学技術計算を支援するソフトウェア・システム(STA)の構築
- 高並列処理における粒子輸送モンテカルロ・コードの負荷分散
- 粒子モデルのための動的負荷分散アルゴリズム
- キャッシュ競合を制御する性能安定化機構内蔵型数値計算ライブラリについて(数値計算)
- GRIDコンピューティング環境における行列ライブラリ向け性能保証方式の検討(数値計算)
- 自動チューニング型の固有値ソルバーについて
- 並列言語ADETRAN4のVPP-500での利用と評価
- 仕様記述言語VDMによる並列計算機ADENA4シミュレータの実現
- 共有メモリ型アーキテクチャでのC-Stabアルゴリズムの性能評価(HPC-2: 自動チューニング)
- OS開発のためのメニーコアハードウェアシミュレータの設計と実装
- マルチコア・メニーコア混在型並列計算機向けOSの構想
- Two-Phase I/Oの高速化に関する一検討
- メニーコア向けシステムソフトウェア開発のための実行環境の設計と実装
- 9.MPI通信ライブラリの自動チューニング(ソフトウェア自動チューニング技術の応用,科学技術計算におけるソフトウェア自動チューニング)
- 量子多体問題における自由度の壁とそれを越える並列対角化アルゴリズムの開発 : 地球シミュレータ上での超並列量子計算の現状(数値シミュレーションを支える応用数理)
- MPI集団通信の性能チューニングについて
- 性能測定基盤と連携する数値計算ソフトウェア(HPC-11 : 自動チューニング)
- 地球シミュレータ上での18テラフロップス級及び1590億次元行列の厳密対角化計算:トラップされた強相関フェルミ原子ガスの基底状態探索(計算科学の基盤技術とその発展)
- 20507 地球シミュレータ・フルノードを利用した超大規模疎行列固有値の新規計算手法(大規模数値解析(2),OS11 大規模数値解析)
- 大規模SMPクラスタにおける固有値ライブラリの通信最適化について(並列数値計算,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2006))
- 大規模SMPクラスタにおける固有値ライブラリの通信最適化について(並列数値計算, 「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2006))
- 4011 地球シミュレータを用いた世界最大規模の固有値計算への挑戦(F-2 フォーラム「地球シミュレータにおける最適化およびハイエンドシミュレーション」)
- 強相関フェルミ原子ガスの量子物性 : 物性予測への新しいアプローチ
- オントロジー指向アーキテクチャーによる認識処理手法の基礎的検討
- 共有分散メモリ型並列計算機における新規通信手法
- 相対論的分子軌道コードDIRAにおけるDHF計算のベクトル化
- 分散メモリ型並列計算機における縦ブロック分割並列LU分解
- 複合並列計算機におけるADETRAN4処理系の実装について