実世界から発生するビッグデータをリアルタイムに処理するストリーム分析基盤(グランドコンピューティング,<特集>ユビキタス・センサネットワークを支えるシステム開発論文)
スポンサーリンク
概要
- 論文の詳細を見る
ユビキタス社会においてますます増大しつつある,センサ,端末等から連続かつ大量に発生する比較的小さなサイズのデータ(データストリーム)を高速に収集・分析する技術を提案する.本技術は,従来のソリューションのようにいったんデータベースにデータを蓄積して分析するのではなく,大量に連続発生するデータを収集する過程でオンザフライに逐次的に分析することにより,桁違いに高速な処理が可能となる.我々は,ストリーム処理をより簡単にシステム開発できるように,データストリーム処理基盤(DSPP)を開発した.DSPPは,複数の計算機で分散実行される処理ノードの負荷を分散させるフロー制御機構や,データストリーム処理用のメモリ管理機構をもつことが特徴である.これらにより,データの流量や計算機リソースなどが動的に変化した場合においても高性能に分散処理できることを実車によるITS実験データをもとに検証した.
- 2012-11-01
著者
関連論文
- 耐障害システムのためのデータベース接続層の拡張による柔軟な複製機構(Internet/LAN運用管理技術,ユーザ指向の分散システム/インターネットの運用・管理)
- A-17-7 洋上管制におけるコンフリクト回避案導出方式の検討(A-17.ITS,一般セッション)
- B-19-16 大規模状況依存サービスのためのユーザ分散方式の提案とその評価(B-19.ネットワークソフトウェア,一般セッション)
- B-7-49 分散ストリームPub/Subプラットフォームのサーバ解決方式(B-7.情報ネットワーク,一般セッション)
- B-7-48 分散ストリームPub/Subプラットフォームの提案(B-7.情報ネットワーク,一般セッション)
- D-028 大規模フライトデータを対象とした管制指示推薦システムに対する特徴ベクトル集合間類似度計算方式の開発(データベース,一般論文)
- ネットワークロボットを用いた高齢者活動促進のための行動推薦システムのフィールド実験(クラウドで始まる新たなネットワークロボット)
- 実世界から発生するビッグデータをリアルタイムに処理するストリーム分析基盤(グランドコンピューティング,ユビキタス・センサネットワークを支えるシステム開発論文)
- スケーラブルな複合イベント処理システムとその評価(品質制御,輻輳制御,信頼性技術,IPTV,コンテンツネットワーク,ネットワークソフトウェア及び一般)
- B-18-11 多属性の照合を実現する拡張トライ木方式の提案と評価(B-18.ネットワークソフトウェア,一般セッション)
- 実世界から発生するビッグデータをリアルタイムに処理するストリーム分析基盤