BAT(バルクアクセス・トランザクションを用いたデータウェアハウスの構築
スポンサーリンク
概要
- 論文の詳細を見る
最近、並列データベースシステムの主要な応用としていわゆるデータウェアハウスや仮想企業向けのデータセンタが注目されている。一般にデータセンタとげ図1のような構成を持ち、次のような用途を狙ったデータベースシステムである。すなわち:・自律分散的に活動している参加メンバ達から構成された組織において、その系全体に関する大域的な情報を記述するデータベース(図1のDBG)が一つのデータベースシステムに集中管理されており、各メンバからはその行動記録データ(ログ)や要求データがデータセンタへ(ログファイルを使ったバッチ処理として)報告される。データセンタはこのデータに基づいてDBGの最新性や一貫性、的確さを維持する。ログデータ自体もDBGの一部(図1のLOGDB)としてデータセンタに蓄積される。・各メンバはバッチ(またはオンライン)・トランザクションをデータセンタで実行してDBGとLOGDBを用いた情報分析・加工を行ない、それによって行動する。現在、データセンタに集めたデータベース利用形態(いわゆるデータウェアハウス)としてはログを蓄積しメンバから問い合わせを行なう応用(OLAP)が中心である。しかし大域的な情報をデータセンタに維持・活用するという観点からいうと、次のように情報分析と更新処理を併せた利用法も有用である: (1)系全体に関する推定モデルをDBGとして維持し、メンバからのログ報告に応じてDBGを適切に更新する場合。→ (事例1) 例えば、図1を「分散してマーケティング活動を行なっている店舗群のデータセンタ」とし、そこに「全地域にまたがったグローバルな時間・地域・品目・客層別の顧客需要量分布の推定モデル」をDBGとして集中管理する、という利用形態が考えられる。(DBGとしては適切な履歴データ集合を用いる。)こうした大域的な推定モデルがデータセンタにあると組織の戦略決定に有用である。この利用法では、DBG(推定モデル)の適切さを維持することが重要であるが、そのためには、各店舗メンバは自分の売り上げログデータを定期的にバッチ処理としてデータセンタへ報告し、同時にこのログを元にDBGの一部をより的確・最新なものへと修正していく必要がある。(各メンバの自律性を保つため、このDB処理はメンバごとに別々の処理単位として並行実行される。) (2)系全体のグローバルな現在状態をDBG (図1)として管理し、その最適性を系の変化に応じて維持する場合。→(事例2) 図1が在庫センタを地域別に分散させた物流システムのデータセンタとし、そこに全地域にわたる在庫データや出荷可能データの現在値をDBGとして集中管理するような場合である。このとき、在庫管理メンバを複数個用意し、各々が(定期的なバッチ処理として)自分の推定データに基づいてDBGのある領域の最適在庫量を管理すると、DBG(在庫データ)全体の最適性が自律分散的に維持できる。このように、「仮想組織の大域的な現在状態データ、推定モデル、ログデータをDBGとしてデータセンタに集中管理しその最適性をメンバごとに自律分散的に維持する」という枠組を使うと自律分散型組織に適したデータウェアハウスが実現できる。本稿ではこの枠組を仮想組織向けデータウェアハウスのモデルとして提案し、その実装方法を述べる。
- 一般社団法人情報処理学会の論文
- 1996-03-06
著者
関連論文
- 単純多角形に対する包含多角形列の構成法
- 絶対近傍の被覆率と点配置
- 構図に基づく類似画像検索のための類似度
- 画像の領域分割に基づく類似画像検索(画像検索,アーカイブ)
- K-023 領域分割に基づく類似画像検索のrunlength符号化による高速化(K分野:教育工学・福祉工学・マルチメディア応用)
- 多次元データマイニングによるWeb空間の構造分析の評価
- 多構造データベース演算を用いたログデータ分析の試み
- D_019 多次元データマイニングを用いたWeb空間の構造解析の評価(D分野:データベース)
- N-OPS : 系列データベースにおける連続系列パターンの探索算法(データベース)
- 任意のL_p距離関数による検索が可能な索引構造(セッション3)
- 任意のL_p距離による検索を可能とする距離変換規則
- ストレージシステムにおけるデーター貫性を保証したアーカイブ取得方式(ストレージ技術, データ工学論文)
- 楽曲圧縮過程において算出される自己相関係数列を用いた楽曲の節長抽出と構造分析(音楽制作・音楽分析)
- 楽曲圧縮過程において算出される自己相関係数列を用いた楽曲の節長抽出と構造分析
- 多次元的なログデータマイニングを実現するデータキューブ機構の提案
- D-021 高頻度アイテムセットによる多次元的なログデータ分析を支援するデータキューブ機構(D.データベース)
- D-4-9 高頻度アイテムセット分析を行うデータキューブ機構アイテムセットキューブによるWebログ分析(D-4. データ工学)
- 問合せ分布を考慮したR木における領域分割方式(データベース)
- LD-5 問い合わせ分布に適応した多次元ファイル編成法GR木のアーカイブ環境への適用(D. データベース)
- 自己相関特徴量を用いた圧縮楽曲データからの構造抽出
- ウェーブレット分解係数の階層的相関関係を用いたテクスチャ類似画像検索(:ビジュアルデータベース)
- TwinVQに基づいたビットレートに依存しない音楽検索のための特徴量
- TwinVQに基づいたビットレートに依存しない音楽検索のための特徴量
- 1Q-9 ウェーブレット変換を用いたテクスチャ検索のための質問画像の生成法
- 1P-7 ビットレートの異なるTwinVQオーディオデータの類似曲検索のための特徴量
- ウェーブレット変換を用いた対話的類似画像検索と民俗資料データベースへの適用 (人文科学とコンピュータ)
- 5T-5 ウェーブレット変換と高次局所自己相関特徴量を用いた対話的類似画像検索システム
- D-4-12 制約つき相関性ルール発見問題における次元削減の適用
- マスク集合を用いた制約つき相関性ルール発見問題の高速化
- 自動微分法と区間演算による陰曲面近似システムの試作と評価
- ウェーブレット変換を用いた画像データベースにおける対話的類似画像検索方式
- 曲の局所パターン特徴量を用いた類似曲検索・感性語による検索
- ウェーブレット変換を用いたテクスチャ特徴量
- 連想型ルール発見問題における追加データの処理方式
- 永続オブジェクト指向スクリプト言語を用いた移動計算機向け情報検索機構の実現
- 移動計算機における情報ベース検索スクリプトの合成方式
- データマイニングにおける追加データの処理方式
- BAT(バルクアクセス・トランザクションを用いたデータウェアハウスの構築
- 高速自動微分法と区間解析を用いたレイトレーシング法の評価
- ウェーブレット変換を用いた画像のテクスチャ解析
- 音楽データベースにおける感性検索の試み
- スクリプト言語による移動計算機向け永続オブジェクトシステム
- 高速自動微分を用いた区間解析によるレイトレーシング法
- 木情報源の符号化 (符号と暗号の代数的数理)
- ハイブリッド型XML - 関係データベースにおけるキーワード検索
- ハイブリッド型XML - 関係データベースにおけるキーワード検索
- 大規模データベースを用いた計画問題とその並列処理方式
- データベースを用いた計画作成における並列処理方式
- 大規模データベースを用いた戦略的計画の作成方式
- 永続オブジェクト指向スクリプト言語を用いた移動計算機向け情報検索機構の実現
- データベースを用いた多エージェント系のシミュレーション方式
- 6S-9 グラフデータベースにおけるTop-kキーワード検索方式の改良と評価(XML・グラフデータベース,学生セッション,データベースとメディア,情報処理学会創立50周年記念)
- 3R-8 多次元的なWeb空間マイニングを行うデータベースシステムの実現 : 一般化された制約条件への対応(Web応用,学生セッション,データベースとメディア,情報処理学会創立50周年記念)
- A-020 グラフデータベースにおけるキーワード検索方式の改良(モデル・アルゴリズム・プログラミング,一般論文)
- バルクアクセス・トランザクションを用いたデータウェアハウスの構築
- スクリプト言語を用いた移動計算機向けの永続オブジェクトシステム
- 直交Wavelet変換を用いた類似画像検索方式
- 内容に基づいた画像と楽曲の検索(類似尺度と情報検索)
- ウェーブレット変換を用いた対話的類似画像検索システム
- 画像内容に基づいた画像検索システム
- Computing a Sequence of Circumscribing Polygons for Convex Polygon (Computational Geometry and Discrete Mathematics)
- 凸多角形に対する包含多角形列の計算
- 最適二分探索木を与える領域と回転操作及び三角形分割
- 検索確率をもつ二分探索木の探索長の最適期待値を与える領域分割の生成
- 包含多角形列の計算手法とその実験的解析 (Theoretical Foundations of Computing)
- D-4-2 パイプライン型リソースマネージャーにおけるトランザクション処理方式の検討
- データ圧縮における最新アルゴリズム[V・完] : 算術符号,乱数生成と区間アルゴリズム
- 乱数生成と情報源符号化(データ圧縮)
- 包含多角形列の計算手法とその実験的解析
- D-017 グラフデータベースにおけるキーワード検索の結果分類方式(データベース,D分野:データベース)
- 知的分散システムIDPSにおけるデータベース処理機構IDPS-DBの設計と評価(データ工学,Web情報システム,システム開発論文)