VMライブマイグレーションにおける大規模I/O処理挙動に関する一考察(ストリーム処理とI/O,ビックデータ工学及び一般)
スポンサーリンク
概要
- 論文の詳細を見る
近年のクラウドコンピューティングでは,計算資源の管理に仮想化技術を利用している.仮想化技術の要素技術の一つであるVMライブマイグレーション等を利用することで,クラウドプロバイダではサービスを停止することなく計算資源の集約化や負荷分散が可能となる.現在,ウェブコンテンツ,センシングデータなどのデジタルデータが急増するなか,クラウドコンピューティングにおける大容量のデータを処理するアプリケーションの効率化が急務である.しかしながら,大規模I/O処理を行うVMライブマイグレーションの挙動は十分に解析されていない.本報告では,VMライブマイグレーション時の入出力挙動を実機を用いて詳細に解析し,大規模データ処理におけるVMライブマイグレーションにおける課題について明らかにする.
- 一般社団法人電子情報通信学会の論文
- 2012-07-25
著者
-
豊田 正史
東京大学
-
横山 大作
東京大学
-
横山 大作
東京大学IRT研究機構
-
喜連川 優
東京大学
-
中野 美由紀
東大
-
石田 渉
東京大学
-
Kitsuregawa Masaru
Univ. Tokyo
-
中野 美由紀
東京大学
-
豊田 正史
東大
関連論文
- 多周期的更新アクセスに適した二次記憶管理技法 : 連続的Webクローリングへの適用(ファイル編成,情報爆発論文)
- 編集にあたって(平成21年度長尾真記念特別賞紹介)
- グリーンレプリケーション : 二次系ディスクストレージの省電力化(ストレージ 並列分散データベース,データ工学論文)
- 特集「インタラクティブシステムとソフトウェア」の編集にあたって
- 編集にあたって(平成21年度論文賞の受賞論文紹介)
- 大規模ウェブテキストからの片仮名用言の自動獲得(テキストマイニング,データ工学論文)
- コンピュータゲームプレイヤにおける評価要素の自動生成に関する研究(評価関数,ゲームプログラミング)
- Bouzy's 5/21 algorithmを用いたDf-pn+探索の詰碁への適用
- トレンドを考慮した検索クエリの分類手法の一検討
- 「ロボットを進化させる最先端IT技術」特集について
- 2.50年後の情報社会を支えるIT基盤(情報処理技術の未来地図,50周年記念特集号)
- GAとTD(λ)学習の組み合わせによるゲーム局面評価パラメータの調整(学習1)
- IFIP-情報処理国際連合-近況報告(委員会から)
- ITの進展と法制度の非想定領域 : 著作権法一部改正,47-6,47-7による検索エンジンの合法化について(研究開発における情報利用と著作権)
- 素性にモーラとシラブルを用いた略語の自動推定(言い換え・略語・要約)
- 50周年記念全国大会を振り返って : 7,150人もの多のくの方々にご参加いただきお礼申し上げます(記念大会が示した情報処理の未来-情報処理学会創立50周年記念(第72回)全国大会報告-)
- なぜソフトウェア論文を書くのは難しい(と感じる)のか
- 特集「ソフトウェア論文」の編集にあたって
- 特集「ソフトウェア論文」の編集にあたって(ソフトウェア論文)
- グリッドチャレンジテストベッドの構築と運用 : グリチャレテストベッドの作り方(HPC-3 : 大規模運用システム(1))
- コラボラティブグリーンストレージ : データベースシステムとの連携によるディスクストレージ省電力化の構想(インターネットと環境・エコロジー,インターネットと環境・エコロジー,一般)
- 大規模日本語Webアーカイブの構築とその分析 (特集 データマネジメント技術)
- 10.Socio Sense : 過去9年に及ぶWebアーカイブから社会の動きを読む(第2部:情報の高信頼蓄積・検索技術等の開発,学と産の連携による基盤ソフトウェアの先進的開発)
- オンライントランザクション処理におけるDynamic Voltage and Frequency Scalingの消費電力削減効果に関する実験的考察 (データ工学)
- アウトオブオーダー型データベースエンジンOoODEの構想と初期実験
- 9.ストレージフュージョン : ストレージシステムとデータベース管理システムの融合(第2部:情報の高信頼蓄積・検索技術等の開発,学と産の連携による基盤ソフトウェアの先進的開発)
- 分散共有メモリ計算機上におけるデータスキューに対する結合演算の性能解析
- 分散共有メモリ計算機上におけるデータスキューに対する結合演算の性能解析
- 分散共有メモリ計算機における並列ハッシュ結合演算処理の性能解析 (高度データベース論文特集)
- 分散共有メモリ並列計算機における関係結合演算の性能
- Webマイニングにおける語義曖昧性解消のための擬似負例を用いた能動学習
- オンライントランザクション処理におけるDynamic Voltage and Frequency Scalingの消費電力削減効果に関する実験的考察(実世界データ処理,モバイルデータベースとGIS及び一般)
- 大規模Webアーカイブ更新のための階層的スケジューリング手法
- 情報爆発論文特集の発行にあたって(情報爆発論文)
- データベース
- 編集長インタビュー 喜連川優 東京大学生産技術研究所教授 "検索"を超える基盤を作りたい
- 編集にあたって(平成20年度論文賞の受賞論文紹介)
- 編集にあたって(平成20年度長尾真記念特別賞紹介)
- IFIP-情報処理国際連合-近況報告(委員会から)
- 6R-3 ディスクストレージ省電力化型問合せ実行方式に関する一考察(データベース技術,学生セッション,データベースとメディア,情報処理学会創立50周年記念)
- 6R-5 An Experimental Study on Basic Performance of Flash SSDs with Micro Benchmarks and Real Access Traces
- 6R-4 アプリケーション指向ディスクドライブ省電力方式の一考察 : OLTP系DBMSのI/O挙動特性に基づくディスクドライブ省電力の効果(データベース技術,学生セッション,データベースとメディア,情報処理学会創立50周年記念)
- 1K-5 地球観測データに対するメタデータ登録システムの構築 : データセットドキュメントメタファを利用したメタデータ登録(情報爆発時代における大規模画像処理システム,一般セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 5K-7 大規模Webアーカイブにおける時間分解能向上手法の検討(情報爆発時代におけるWeb解析,一般セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 1K-7 アジアモンスーン解析のための三次元気象データ可視化システム(情報爆発時代における大規模画像処理システム,一般セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 1K-6 水産資源研究のための粒子追跡シミュレーション : インタフェースの作成(情報爆発時代における大規模画像処理システム,一般セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 1K-4 多様な地球環境データを対象としたマイニングシステムの構築(情報爆発時代における大規模画像処理システム,一般セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 3K-1 自然言語処理における系列ラベリング問題のための高速で厳密な漸次的複合化アルゴリズム(情報爆発時代におけるテキスト処理・Wikipedia,一般セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 6W-2 画像群中の物品発見における計算量削減手法の提案(画像データベース,学生セッション,人工知能と認知科学)
- 4ZP-8 時間変化を考慮した検索クエリのクラスタリングにおけるクエリ間類似度の検討(情報爆発時代におけるWeb検索技術,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 6K-8 Jumbo : a data intensive distributed computation platform : design overview and preliminary experiment
- 5K-6 時系列情報をもつウェブグラフ発達過程の3次元可視化(情報爆発時代におけるWeb解析,一般セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 3K-2 組み合わせ素性に基づく分類器の効率的学習法(情報爆発時代におけるテキスト処理・Wikipedia,一般セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 2K-3 隠れマルコフモデルによるデータストリームのモニタリング手法(情報爆発時代におけるアルゴリズム高率化,一般セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- InTrigger : 柔軟な構成変化を考慮した多拠点に渡る分散計算機環境(HPC-14 : 分散処理)
- ハッシングに基づく大規模探索問題の耐故障分散処理手法
- 分散ハッシュ表に基づく大規模探索問題の耐故障並列化手法
- アクセス計算量 : 新しい並列計算量の枠組みの提案(プログラミングモデル・ツール)
- 高度な問題領域依存チューニングを許す並列組合せ最適化ライブラリPopKern
- 並列論理型言語処理系KLICのための動的負荷分散機構
- Hmine-rev : H-mine並列化に向けて大容量データベースにおける頻出パターンマイニングに関する研究(データマイニング, 夏のデータベースワークショップ2005)
- 新動詞の成立にみる意味と形の変化の相関--「ファブる」と「モフる」の分析から
- インタビュー 喜連川優氏 東京大学生産技術研究所 教授 ぶっとんだ発想を出そう
- 戦略情報融合国際研究センター
- ストレージとDBMSの連携によるI/O性能障害の統合診断支援方式の開発と評価
- 特集「ソフトウェア論文」の編集にあたって
- データベースマシンGRACEの同時実行制御
- あから2010勝利への道 : 2.あから2010のシステム設計と操作概要
- 思い出し支援
- オンライントランザクション処理におけるスループットを考慮したプロセッサ省電力手法の実験的考察
- オンライントランザクション処理におけるDynamic Voltage and Frequency Scalingを用いたアプリケーション指向省電力手法の実験的考察(一般(ストリーム・匿名性・省電力),e-ScienceとData Intensive Science及び一般)
- ゲーム構成要素を組み合わせた特徴の最適化
- 特集「情報爆発時代におけるIT基盤技術」の編集と査読,編集における「べからず集」の実践にあたって
- MapReduce環境におけるアドホックなクエリを対象とした,Adaptive indexing適用に関する一検討
- オンライントランザクション処理におけるVM挙動の詳細解析
- ITをイネーブラとするプラットフォーマ学会を目指す:若手やんちゃ枠も作りたい -会長就任にあたって-
- 大規模仮想化環境におけるオンライントランザクション処理の詳細解析
- マイクロブログにおける対話ネットワークと投稿内容を併用したユーザ推薦に関する一考察
- マイクロブログにおける対話ネットワークと投稿内容を併用したユーザ推薦に関する一考察
- SSDを利用したリレーショナルデータベースにおける大規模意思決定支援クエリ処理性能の特性
- SSDを利用したリレーショナルデータベースにおける大規模意思決定支援クエリ処理性能の特性
- マイクロブログを用いた鉄道の運行トラブル状況抽出に関する一検討
- マイクロブログを用いた鉄道の運行トラブル状況抽出に関する一検討
- BI-4-2 インタークラウドプロビジョニングに向けた計算リソースモデル(BI-4.高信頼化・省電力化に向けたクラウド連携技術,依頼シンポジウム,ソサイエティ企画)
- 電力を考慮したアプリケーション構築のための計算機システムの提案
- VMライブマイグレーションにおける大規模I/O処理挙動に関する一考察(ストリーム処理とI/O,ビックデータ工学及び一般)
- テキストデータの未来関連情報における予定変更情報の獲得に関する研究
- マイクロブログを用いた鉄道の運行トラブル状況抽出に関する一検討 (データ工学)
- マイクロブログにおける対話ネットワークと投稿内容を併用したユーザ推薦に関する一考察 (データ工学)
- 時々刻々と成長するグラフのための直径モニタリング
- マイクロブログからの鉄道の運行トラブル発生検出および継続状況の抽出 (特集 「機械学習と自然言語処理への応用」および一般)
- MapReduce環境におけるアドホックなクエリを対象とした,Adaptive indexing適用に関する一検討(ビッグデータ,ビッグデータとソーシャルコンピューティング,及び一般)
- オンライントランザクション処理におけるVM挙動の詳細解析(ビッグデータ,ビッグデータとソーシャルコンピューティング,及び一般)
- 効率的なテキストストリーム処理のための自己適応的分類器 (特集 「人工知能とデータサイエンス」および一般)
- 語彙正規化との同時処理による高精度な形態素解析 (特集 「人工知能とデータサイエンス」および一般)
- 形態素解析における高速な単語ラティス生成
- SSDを利用したリレーショナルデータベースにおける大規模意思決定支i援クエリ処理性能の特性(ストレージ,ビッグデータを対象とした管理・情報検索・知識獲得及び一般)
- マイクロブログを用いた鉄道の運行トラブル状況抽出に関する一検討(twitter・ソーシャルネットワーク,ビッグデータを対象とした管理・情報検索・知識獲得及び一般)
- マイクロブログにおける対話ネットワークと投稿内容を併用したユーザ推薦に関する一考察(twitter・ソーシャルネットワーク,ビッグデータを対象とした管理・情報検索・知識獲得及び一般)
- アウトオブオーダ型クエリ実行に基づくプラグイン可能なデータベースエンジン加速機構