研究者総覧
論文
- タイトル
- タイトル(英)
- Low-load server crawler: Design and evaluation
- 参照URL
- https://researchmap.jp/mikami_yoshiki/published_papers/29795076
- 著者
- 著者(英)
- Katsuko T. Nakahira,Tetsuya Hoshino,Yoshiki Mikami
- 担当区分
- 概要
- 概要(英)
- This paper proposes a method of crawling Web servers connected to the Internet without imposing a high processing load. We are using the crawler for a field survey of the digital divide, including the ability to connect to the network. Rather than employing normal Web "page" crawling algorithm, which usually collect all pages found on the target server, we have developed "server" crawling algorithm, which collect only minimum pages from the same server and achieved low-load and high-speed crawling of servers.
- 出版者・発行元
- 出版者・発行元(英)
- 誌名
- 誌名(英)
- Proceeding of the 17th International Conference on World Wide Web 2008, WWW'08
- 巻
- 号
- 開始ページ
- 1207
- 終了ページ
- 1208
- 出版年月
- 2008年
- 査読の有無
- 査読有り
- 招待の有無
- 掲載種別
- 研究論文(国際会議プロシーディングス)
- ISSN
- DOI URL
- https://doi.org/10.1145/1367497.1367729
- 共同研究・競争的資金等の研究課題
研究者
三上 喜貴
(ミカミ ヨシキ)