Hadoopを活用した大規模データ解析の動向と今後の展望(<特集>クラウドとアナリティクス)
スポンサーリンク
概要
- 論文の詳細を見る
高速ネットワーク環境の普及にともない,現在,社会の様々な場面においてデータの大規模な収集・蓄積が進んでおり,これを解析することで有用な情報を抽出したいという機運が高まっている.このための計算基盤として,並列分散計算の仕組みであるHadoopが有望視されており,実際にHadoopを活用した事例もいくつか報告されている.しかし,Hadoopの提供するMapReduceフレームワークは比較的低レベルな仕組みであり,データ解析利用にはプログラムの特別な設計が必要であることから,Hadoopをデータ解析に活用するためのプログラミング・モデルやツールが求められている.本稿では,このようなHadoop上でのデータ解析をとりまく状況を概観し,Hadoopとデータ解析アプリケーションとの間のギャップがどのように埋められようとしているかについて解説を試みる.
- 2011-06-01
著者
関連論文
- デジタル・エコノミーの新潮流とそのIT基盤(デジタル・エコノミー)
- 並列トランザクショナルアプリケーションのためのプログラミングフレームワーク
- RTOSシミュレーションのための性能と移植性が高いスケジューラ(開発環境,組込みシステム工学)
- 非対称なスピンロックの提案とそのJavaへの応用
- スレッド局所性を利用したJavaロックの高速化
- Webサービス合成のための振舞い記述のしくみ(「Semantic Webとその周辺」)
- OS/2における日本語環境
- 日本IBM創立70周年記念企画 東京基礎研究所の歩みとIBMの先進テクノロジー(TRL25周年) (特集 イノベーションを生み出すDNA--日本IBM創立70周年記念特集)
- Hadoopを活用した大規模データ解析の動向と今後の展望(クラウドとアナリティクス)
- 依存グラフを用いてアーキテクチャ独立な最適化と対象計算機の資源制約を調整する手法
- 非常に偏った条件分岐が存在するプログラムのデータフロー最適化