時系列データの統計解析によるPCクラスタシステム解析手法の提案(クラスタシステム)
スポンサーリンク
概要
- 論文の詳細を見る
本論文では,PCクラスタシステムにおける新たなシステム解析手法を提案する.本手法の特長は,時系列データを入力とし,統計解析の1手法であるクラスタ分析を時間方向とノード方向の両方に対して行う点にある.本手法により,PCクラスタシステム上で採取した大量の測定データ(関数プロファイル情報およびCPI等のCPUアーキテクチャ性能情報)から性能ボトルネックとなりうるシステムの挙動変化が,いつ・どのノードで発生したかを迅速に検出し,その原因を特定できる.我々は,本手法を実装した統合解析ツールiScopes (Integrated Software for Comprehensive Performance Evaluation System)を開発し,8ノード(16CPU)で構成されるPCクラスタシステムへの実適用を行った.その結果,異常ノードの発見やアプリケーション分析に対する本手法の有用性を確認できた.
- 社団法人情報処理学会の論文
- 2006-09-15
著者
-
住元 真司
富士通研究所
-
久門 耕一
富士通研究所
-
住元 真司
(株)富士通研究所
-
平井 聡
株式会社富士通研究所
-
山村 周史
株式会社富士通研究所
-
小野 美由紀
株式会社富士通研究所
-
松本 和宏
株式会社富士通研究所
-
住元 真司
株式会社富士通研究所
-
久門 耕一
株式会社富士通研究所
-
久門 耕一
富士通研究所人工知能研究部
-
久門 耕一
(株)富士通研究所itコア研究所itアーキテクチャ研究部
-
山村 周史
富士通
-
小野 美由紀
株式会社富士通研究所 マルチメディアシステム研究所メディア統合研究部
-
小野 美由紀
(株)富士通研究所
関連論文
- 正規化最尤符号化に基づくグラフクラスタリング (情報論的学習理論と機械学習)
- GPGPU上での流体アプリケーションの高速化手法 : 1GPUで姫野ベンチマーク60GFLOPS超(高性能計算とアクセラレータ)
- 大規模InfiniBandシステムにおける経路更新手法の提案(ネットワーク技術,2009年並列/分散/協調処理に関する『仙台』サマー・ワークショップ(SWoPP仙台2009))
- ファイルステージング再考 : オンデマンド化と高速化に向けたプロトタイプ実装の評価(ファイルシステム,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2009))
- 並列プログラムの実行可搬性を実現するMPI通信ライブラリの設計(インターコネクト/MPI通信ライブラリ,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2009))
- 2.次世代高性能コンピュータシステム上の高信頼ソフトウェアシステムの開発支援技術(第1部:高い生産性を持つ高信頼ソフトウェア作成技術の開発,学と産の連携による基盤ソフトウェアの先進的開発)
- 無線分散ネットワークを用いた秘匿化機能の空間分散化によるプライベート無線ネットワークの情報漏洩リスク低減法 (ユビキタス・センサネットワーク)
- 無線分散ネットワークを用いた秘匿化機能の空間分散化によるプライベート無線ネットワークの情報漏洩リスク低減法 (アドホックネットワーク)
- 無線分散ネットワークを用いた秘匿化機能の空間分散化によるプライベート無線ネットワークの情報漏洩リスク低減法 (ソフトウェア無線)
- 無線分散ネットワークを用いた秘匿化機能の空間分散化によるプライベート無線ネットワークの情報漏洩リスク低減法 (無線通信システム)
- 時系列データの統計解析によるPCクラスタシステム解析手法の提案(クラスタシステム)
- キャッシュミス削減によるLinuxプロセススケジューラの高速化(アーキテクチャとシステムソフトウェア)
- NUMAマシンでのコマーシャルワークロード向けLinux最適化(並列処理)
- LinuxカーネルのNUMA向け最適化
- Xeonプロセッサ向けLinpackベンチマーク最適化手法とその評価(性能最適化)
- マルチホップ伝送を用いた復調可能領域の空間分散化による情報漏洩リスク低減法の提案(初めての研究会,初めての研究会,鉄道,車車間・路車間通信,リソース制御,スケジューリング,無線通信一般)
- 高速通信機構PM2の設計と評価
- 既存OSの枠組みを用いたクラスタシステム向け高速通信機構の提案(特集:システムソフトウエアの新しい潮流)
- ソフトウェア分散共有メモリシステムにおけるページ転送方式の比較(並列処理)
- GigaE PM: Gigabit Ethernetを用いた高速通信機構の設計と評価(並列処理)
- ソフトウェア分散共有メモリSCASHにおけるページ管理ノードの動的再配置機構の実装と評価
- クラスタ上のプログラミング開発環境 : SCoreクラスタシステムソフトウェア
- GigaE PM II: Gigabit Ethernetによる高速通信ライブラリの設計
- Gigabit Ethernet NICの性能評価
- Gigabit Ethernet NIC の性能評価
- Myrinetを用いた分散共有メモリシステムの評価
- SMPクラスタ上でのMPIの実装と評価
- Gigabit Ethernetを用いた高速通信ライブラリの設計
- T2Kオープンスパコン仕様と富士通のT2K仕様準拠の計算ノード Fujitsu HX600
- PM/InfiniBand-FJ : InfiniBandを用いた大規模PCクラスタ向け高性能通信機構の設計(ネットワーク)
- メモリトレースを元にした大規模サーバの性能予測
- 2000-ARC-139-1 メモリバストレースを用いた共有バス型並列計算機のキャッシュ評価
- 4H-7 GATESによるCommercial Workloadアクセスパターンの分析
- 4H-6 GATES(PCサーバ用汎用メモリアクセストレースシステム)の開発
- 6.SCore型クラスタ
- ガウス混合分布の正規化最尤符号の効率的計算法とモデル選択 (情報論的学習理論と機械学習)
- SANを用いた高性能コンピュータシステムの将来像と究極の姿(パネル討論,計算システムとファイルシステム,SANを用いた高性能コンピュータシステム,及び一般)
- B-5-121 復調可能領域の空間的分散化による情報漏洩リスク低減法における補助情報のマルチホップ伝送に関する一検討(B-5.無線通信システムB(ワイヤレスアクセス),一般セッション)
- 並列プログラムの実行可搬性を実現するMPI通信ライブラリの設計(インターコネクト/MPI通信ライブラリ,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2009))
- 10Gb Ethernet上のRDMA転送機能による仮想マシン移動の設計と評価(クラスタシステム)
- 10Gb Ethernet上のRDMAを用いた遠隔スワップメモリの実装(一般,SANを用いた高性能コンピュータシステム,及び一般)
- 10Gb Ethernet上のRDMA転送機能の仮想マシン移動への適用(一般,SANを用いた高性能コンピュータシステム,及び一般)
- Gigabit Ethernet NICの性能評価
- Gigabit Ethernet NICの性能評価
- 並列推論マシンPIM/pのアーキテクチャ
- 配列転置データ転送を高速化する10Gb Ethernetインタフェースカードの設計(ネットワーク)
- 高性能通信処理オフロードエンジンUZURA実現に向けて(HPC-6: 高速ネットワークとその応用)
- 10Gb Ethernetを用いた高性能通信機構の設計(HPC-6 : 通信ライブラリ)(2004年並列/分散/協調処理に関する『青森』サマー・ワークショップ(SWoPP青森2004) : 研究会・連続同時開催)
- 姫野ベンチマークによるItanium[○!R]2とXeon^の性能比較とその分析
- Linuxテクノロジの最先端 (特集:EJB&Linux) -- (Linux)
- LinuxカーネルのNUMA向け最適化
- Fat-Tree構成InfiniBandネットワークにおける競合回避手法の提案
- InfiniBandにおける最適なアドレス割り当てによる経路更新処理の高速化
- LinuxカーネルのNUMA向け最適化
- 通信量を考慮したデッドロック回避ルーティング方式
- Fat-Tree構成InfiniBandネットワークにおける競合回避手法の提案
- マルチコアPCクラスタ向けAll-to-all通信アルゴリズムの提案と評価
- マルチコアPCクラスタ向けAll-to-allアルゴリズムの提案と評価
- マルチコアPCクラスタ向けAll-to-allアルゴリズムの提案と評価
- InfiniBandにおける最適なアドレス割り当てによる経路更新処理の高速化
- 並列UnixOSの試作と評価
- ファイルステージングシステムCatwalkのMPI-IO実装
- PACS-CSにおける隣接通信性能の高速化(HPC-13 : 通信II)
- PACS-CSのための高性能通信ライブラリインターフェイスの設計(HPC-12 : 大規模運用システム(2))
- 多段スイッチInfiniBandネットワークにおける全対全通信性能の評価
- ファイルキャッシュシステムの有効性向上に向けた科学技術計算アプリケーションのI/O特性評価
- 科学技術計算用超並列クラスタPACS-CSの実装と基本性能評価(HPC-12 : 大規模運用システム(2))
- シームレスなMPI環境を実現するMPI-Adapterの設計と性能評価
- ファイルステージング再考 : オンデマンド化と高速化に向けたプロトタイプ実装の評価(ファイルシステム,「ハイパフォーマンスコンピューティングとアーキテクチャの評価」に関する北海道ワークショップ(HOKKE-2009))
- SCoreクラスタ計算環境
- 編集にあたって(コンピュータ将棋の新しい動き)
- 編集にあたって
- 3A-1 計算センタ高稼働率とジョブ待機時間短縮を実現するジョブスケジューラ(ハイパフォーマンスコンピューティング,一般セッション,アーキテクチャ,情報処理学会創立50周年記念)
- 多段スイッチ InfiniBand ネットワークにおける全対全通信性能の評価
- 4A-3 性能データの可視化分析ツール(設計・検証技術,一般セッション,アーキテクチャ,情報処理学会創立50周年記念)
- 4A-2 電力ベースサンプリングシステムPARITSの評価(設計・検証技術,一般セッション,アーキテクチャ,情報処理学会創立50周年記念)
- 4A-1 電力ベースサンプリングシステムPARITSの提案(設計・検証技術,一般セッション,アーキテクチャ,情報処理学会創立50周年記念)
- マルチコアPCクラスタ向け All-to-all アルゴリズムの提案と評価
- マルチコアPCクラスタ向け All-to-all アルゴリズムの提案と評価
- 計算機ハードウェアの動向(ガスタービンに関連するCFD(数値流体力学)解析の現状)
- 通信ライブラリPMのUDP上への移植と評価
- 通信ライブラリPMのUDP上への移植と評価
- 通信ライブラリPMのUDP上への移植と評価
- 複数Gigabit Ethernetを用いたPACS-CSのための高性能通信機構の設計と評価(ネットワーク)
- PACS-CSのためのEthernetを用いた高性能通信機構の設計(HPC-8: 高性能クラスタ)
- 10Gb Ethernet上の通信プロトコル作成支援技術(OS-3 : 高性能計算機)
- 次世代高性能計算機アーキテクチャ上のシステムソフトウェア開発環境(OS-3 : 高性能計算機)
- 大規模コンピュータシステムにおけるインタコネクト技術の動向(コンピュータシステムのインタコネクト技術及び一般)
- SANを用いた高性能コンピュータシステムとその課題
- SANを用いた高性能コンピュータシステムとその課題(ハードウェアとOS,SANを用いた高性能コンピュータシステム,及び一般)
- クラスタシステム向け共有ファイルシステムの実現と評価
- クラスタシステム向け共有ファイルシステムの提案
- メモリ消費電力に基づくCPU周波数の動的制御
- 高帯域と低遅延を両立するFat Tree結線方式の提案
- 次世代グリーンデータセンターの全体像 (特集 研究開発最前線)
- 通信量バランスの良いデッドロック回避ルーティング手法の提案とクラスタネットワークにおける評価 (コンピューティングシステム Vol.4 No.4)
- メモリ消費電力に基づくCPU周波数動的制御手法の評価
- グローバルデータ構造のためのメモリ管理モデルの検討
- ACP基本層の実装と初期評価
- ACP基本層の設計思想とインタフェース