An evaluation of Fat-Btree based and HDFS based Storage Systems for Small File I/O Applications
スポンサーリンク
概要
- 論文の詳細を見る
In this paper, we introduce a parallel DBMS based on Fat-Btree and PostgreSQL. Because the high cash hit rates and low update synchronization cost in the Fat-Btree index, our DBMS has a good scalability and data accessing efficiency. In addition, the center node is no more required for the metadata management in the system, thus our DBMS achieves high reliability as well. To evaluate our system, we compare it with HBase, a distribute DBMS built on top of Hadoop, which is known for the efficient and scalable data accessing performance. Experimental results on a 100-nodes cluster system verify that our DBMS greatly outperform HBase in both system scalability and throughput.
- 2011-03-02
著者
関連論文
- 更新処理を考慮したXMLラベルにおける構造情報の抽出手法(構造化文書,XML,情報爆発論文)
- 挿入によって他ラベル変更を起こさない可変長XMLラベルの容量評価(夏のデータベースワークショップ2007(データ工学,一般))
- 挿入によって他ラベル変更を起こさない可変長XMLラベルの容量評価(XML (1),夏のデータベースワークショップ2007(データ工学,一般))
- 耐故障バッファリングディスクシステムの性能評価
- 知識ベースシステムのための知識コンパイルについての考察
- 大規模知識ベースマシン実験機の開発(4) : 単一化エンジンの評価
- ストレージシステムにおける省電力効果検証のためのシミュレータ
- ストレージシステムにおける省電力効果検証のためのシミュレータ
- DE2000-86 分散独立アクティブデータベース上でのワークフロー用トランザクションモデル
- クラスタ化ディスクのルール記述による柔軟な非同期バックアップと障害回復
- D-10-1 データレプリケーションの分散制御
- 制御情報を分散したデータレプリケーション方式
- ファイルRMC操作を考慮した関連ファイルの発見
- ファイルRMC操作を考慮した関連ファイルの発見
- 大規模知識ベースマシン実験機の開発(3) : 単一化エンジンの構成方式について
- 大規模知識ベースマシン実験機の開発(1) : 開発の背景と方針
- 5ZK-3 講義講演ビデオの重要シーン抽出によるダイジェスト自動作成(情報爆発時代におけるマルチメディアデータと位置依存情報処理,学生セッション,「情報爆発」時代に向けた新しいIT基盤技術)
- ユーザ作業を反映する仮想ディレクトリ生成のためのアクセス履歴解析手法
- ユーザ作業を反映する仮想ディレクトリ生成のためのアクセス履歴解析手法
- アクセス履歴に基づくファイル間関連度を用いたデスクトップ情報管理ツールの開発(ウェブ情報とデータベースに関して(ポスター講演))
- ロジックプログラミングパラダイムにおける知識ベースシステム (「第五世代コンピュータ」)
- 大規模知識ベースマシン実験機の開発(2) : ハードウェアシミュレータ
- スーパーインポーズドコーディングを用いたXML文書キーワード索引手法(XML,夏のデータベースワークショップDBWS 2006)
- スーパーインポーズドコーディングを用いたXML文書キーワード索引手法(XML)
- 3ZP-4 アクセスログ解析を用いて同一作業で使用されたファイル群を発見する手法の提案(情報爆発時代におけるデータマイニング・アルゴリズム,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 5ZP-1 プライマリ・バックアップ構成を有効利用したストレージシステムの省電力効果見積(情報爆発時代におけるストレージ管理,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 分散制御型全対全通信結合網
- 6ZN-5 複数講演コンテンツのダイジェスト自動生成のためのシーン重要度算出手法の評価(情報爆発時代におけるマルチメディア処理,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 6ZC-4 機関リポジトリと外部情報源を連携した関連論文探索手法(情報爆発時代におけるWebパーティカル検索,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 5ZN-7 Wikipediaのセクションを考慮したリンク解析による関連項目検索手法の提案(情報爆発時代におけるWebマイニング,学生セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
- 知識ベ-スシステム (知的情報処理) -- (知的情報処理技術)
- 編集にあたって
- 特集「情報融合」に向けて(情報融合)
- 編集にあたって
- 編集にあたって
- 編集にあたって
- 特集「情報融合」に向けて(情報融合)
- 編集にあたって
- 編集にあたって
- アクセス関連性によるストレージデータ配置の性能と消費電力
- アクセス関連性によるストレージデータ配置の性能と消費電力
- Fat-Btree, P-tree, SkipGraphを用いた範囲問合せ性能の比較実験
- Fat-Btree, P-tree, SkipGraphを用いた範囲問合せ性能の比較実験
- RAIDのネットワーク上への展開と信頼性向上(マイクロ・プロセッサ,ニューラルネットワーク)
- 複数ディスクからなるストレージシステムの省電力化手法における電力削減効果の比較
- 関連ファイルの発見におけるファイルRMC操作の考慮
- アクセスログに基づくファイルとWebページの関連性抽出手法
- Valable LCA探索のためのサイズを考慮した索引構成
- An evaluation of Fat-Btree based and HDFS based Storage Systems for Small File I/O Applications
- アクセス頻度情報を付与したインデックスによるデータベースの省電力化手法
- データ工学論文特集の発行にあたって
- 2000-DBS-122-64 分散独立アクティブデータベース上でのワークフロー用トランザクションモデル
- 91-17 読み出し最適化および書き込み最適化ファイルシステムにおけるトランザクション支援
- H.L.ドレイファス/S.E.ドレイファス 共著, 椋田直子 訳, "純粋人工知能批判" (MIND OVER MACHINE) : コンピュータは思考を獲得できるか, アスキー出版局, A5判, 325p., \2,100, 1987
- Performance Comparison of Power-Proportional Approaches in Power Saving of Storage Systems
- 研究履歴生成のための論文メタデータを用いたマージン最大化クラスタリング(プライバシー,アーバンセンシングによる情報創出とその応用,及び一般)
- 低遅延ストリーム処理のための結合演算並列実行方式
- 低遅延ストリーム処理のための結合演算並列実行方式
- RMC操作に基づくタスクとタスク間関連度を考慮したファイル検索(情報検索,データ工学と情報マネジメント論文)
- 耐故障ストレージのディスク回転状況を考慮した省電力化手法におけるシステム構成の影響評価(ストレージシステム,データ工学と情報マネジメント論文)