データウェアハウス向け高性能データ圧縮方式
スポンサーリンク
概要
- 論文の詳細を見る
本稿では,データウェアハウス向けの高性能なデータ圧縮方式について報告する.近年,データウェアハウスの分野では,データを圧縮形式で格納することにより記憶装置コストの削減と入出力負荷の削減を図る方式が実用化されつつある.本稿で報告する圧縮方式は,データを列方向に分割したデータストリームを生成し,行方向の履歴を利用した符号化を行うことを特徴とする.個々のデータストリームにはランレングス符号化,インデックス符号化および差分符号化という単純だが高速な符号化方式を適用する.クエリの処理においては処理に必要なデータストリームがストレージより読み出され,各データストリームが独立に伸張される.本圧縮方式を商用データベース管理システムDIAPRISM/AQL上に付加し,実データを用いた性能評価を行った.その結果,データ圧縮の適用により必要なストレージ容量がおおむね2〜14%に削減され,また,処理時間がおおむね5〜23%に削減されることを確認し,本圧縮方式の有効性を確認した.
- 一般社団法人情報処理学会の論文
- 2006-09-15
著者
関連論文
- 3C-3 ログ検索向け正規表現検索条件の自動生成方式(情報検索,一般セッション,データベースとメディア)
- D-018 大規模電子メールアーカイブシステム向け高速蓄積・検索方式(D分野:データベース)
- 検索機能を備えたストレージシステムによる大規模並列全文検索
- D-4-4 n-gram索引による大規模・並列全文検索方式 : (2)索引の最適化
- D-4-3 n-gram索引による大規模・並列全文検索方式 : (1)実装と評価
- 4C-2 製造業データの履歴追跡方式の検討(情報システム,一般セッション,データベースとメディア)
- 高性能並列情報検索技術 (特集 データマネジメント技術)
- 履歴追跡型データモデルの評価(セッション8b:文書管理)
- D-034 入退管理・映像監視システム向け統合ログ管理方式(データベース,一般論文)
- D-011 履歴データ管理方式の評価(データベース,一般論文)
- 3B-7 履歴追跡結果の表示方式の検討(データベース一般,一般セッション,データベースとメディア)
- 3B-6 履歴追跡に適応するデータモデルの検討(データベース一般,一般セッション,データベースとメディア)
- 履歴追跡型データモデルの評価
- データウェアハウス向け高性能データ圧縮方式
- D-019 正規表現・学習型フィルタ併用方式による機密情報検出の評価(データベース,一般論文)
- D-018 正規表現・学習型フィルタ併用方式による機密情報検出の提案(データベース,一般論文)
- D-001 大規模並列全文検索エンジンにおける多言語検索対応索引方式(データベース,一般論文)
- ブロック化転置ファイルを利用したデータウェアハウス向けデータベース管理システムの評価
- 環境情報データベース向け多拠点センサデータ管理方式
- 事務処理言語の可搬性を指向した実装方式
- D-045 行動履歴追跡機能を備えた統合ログ管理システム(データベース,一般論文)
- O-046 ESBログからのサービス障害検出の実装と性能に関する考察(Webサービス・クラウド,O分野:情報システム)