大規模Webアーカイブのための更新クローラの設計と実装

スポンサーリンク

概要

• 論文の詳細を見る
• 日本データベース学会の論文

著者

• 田村 孝之

  三菱電機株式会社情報技術総合研究所

• 田村 孝之

  東京大学 生産技術研究所

関連論文

• 多周期的更新アクセスに適した二次記憶管理技法 : 連続的Webクローリングへの適用(ファイル編成,情報爆発論文)
• 並列DBMSに於ける動的負荷分散機構の実装
• ATM結合PCクラスタにおける並列データマイニングの実装とTCP再送機構の性能解析
• ボーンデジタル時代におけるウェブアーカイブとその活用基盤としてのSocio-Sense(Webアーカイビングの現状と課題)
• SAN結合PCクラスタにおけるストレージ仮想化機構を用いた動的負荷分散並びに動的資源調整の提案とその評価(データベース)
• 大規模Webアーカイブ更新クローラにおけるスケジューリング手法の評価(Web検索・Webアーカイブ,データ工学論文)
• 多周期的更新アクセスに適した二次記憶管理技法 : 連続的 Web クローリングへの適用
• ATM結合PCクラスタのTCP再送機構の解析と並列データマイニングの性能向上
• 大規模日本語Webアーカイブの構築とその分析 (特集 データマネジメント技術)
• 10.Socio Sense : 過去9年に及ぶWebアーカイブから社会の動きを読む(第2部:情報の高信頼蓄積・検索技術等の開発,学と産の連携による基盤ソフトウェアの先進的開発)
• 5L-5 大規模Webアーカイブにおけるコンテンツ解析支援機構(リーディングプロジェクト e-society:WebアーカイブとWebデータ解析技術,一般セッション,リーディングプロジェクト e-society)
• 大規模Webアーカイブのための更新クローラの設計と実装
• 特定言語で記述されたwebページの選択的収集手法とその評価(Web マイニング・Web情報検索,データ工学論文)
• 共有ストレージプールを用いた並列データベース処理に於けるオンデマンド資源調節
• 共有ストレージプールを用いた並列データベース処理に於けるオンデマンド資源調節
• 4K-5 並列DBMS: DBKernelにおける動的負荷分散機構の評価
• 並列DBMSに於ける動的負荷分散機構の実装
• 並列SQLによる大規模PCクラスター上の相関ルールマイニング : C実装プログラムとの性能比較
• 並列DBMSにおける動的負荷分散機構 : 負荷情報収集方式の検討
• 概念階層を考慮した相関ルールマイニングの関係データベース管理システム上での実現
• 並列DBMSにおける動的負荷分散機構 : 負荷情報収集に関する一考察
• 並列関係データベース処理システムに於ける動的負荷分散:実装設計
• 共有メモリ型計算機上でのトランスポーズドファイルを用いた並列関係問合せ処理の実装方式とその評価
• 共有メモリマルチプロセッサ上でのトランスポーズドファイルを用いた並列関係問合せ処理
• 共有メモリマルチプロセッサ上でのトランスポーズドファイルを用いた並列関係問合せ処理
• トランスポーズドファイル上での並列結合演算処理方式に関する一考察
• 並列SQLサーバSDC-IIにおけるトランスポーズ型ファイル編成適用の検討
• 並列SQLサーバSDC-IIにおけるバッチ問合せ処理方式
• スーパーデータベースコンピュータSDC-IIのバケット平坦化ネットワークにおける負荷特性の評価
• スーパーデータベースコンピュータSDC-IIにおける不均一データ分布での結合演算処理に対する性能評価
• スーパーデータベースコンピュータ(SDC)のバケット平坦化ネットワークにおける縮退動作時の動作特性
• 大規模Webアーカイブ更新のための階層的スケジューリング手法
• 5K-7 大規模Webアーカイブにおける時間分解能向上手法の検討(情報爆発時代におけるWeb解析,一般セッション,「情報爆発」時代に向けた新IT基盤技術,情報処理学会創立50周年記念(第72回)全国大会)
• 通信プロトコルのパラメータチューニングによる大規模PCクラスタの性能向上
• 大規模PCクラスタにおける並列集約演算の高速化
• ATM結合型大規模PCクラスタにおける並列データマイニングとTCP再送機構の解析
• 大規模PCクラスタ仁おける並列関係問合せ実行方式とその評価
• 大規模PCクラスタ仁おける並列関係問合せ実行方式とその評価
• 大規模PCクラスタにおけるトランスポーズドファイルを用いた並列関係問合せ処理
• ATM結合PCクラスタにおける並列関係問合せ処理系の設計と実装
• ATM 結合 PC クラスタ上での並列関係データベースサーバの構築
• ATM結合型PCクラスタにおける並列相関関係抽出
• ATM結合型PCクラスタによる並列データマイニング (時空間データベースおよび一般)
• 並列SQLサーバSDC-IIのTPC-Dベンチマークによる性能評価
• 並列 SQL サーバ SDC-IIのTPC-Dベンチマークを用いた性能評価
• 並列SQLサーバSDC-IIのTPC-Dベンチマークを用いた性能評価
• 表値型ユーザ定義関数を用いた問合せにおける関数出力オーバヘッド削減手法(実世界情報・データベース,ビッグデータを対象とした管理・情報検索・知識獲得及び一般)

もっと見る 閉じる

スポンサーリンク