摘要:
"蜘蛛"(Spider)是Internet上一种很有用的程序,搜索引擎利用蜘蛛程序将Web页面收集到数据库,企业利用蜘蛛程序监视竞争对手的网站并跟踪变动,个人用户用蜘蛛程序下载Web页面以便脱机使用,开发者利用蜘蛛程序扫描自己的Web检查无效的链接……对于不同的用户, 蜘蛛程序有不同的用途。那么,蜘... 阅读全文
posted @ 2007-11-20 20:42 RunSir.cn 阅读(397) 评论(0) 推荐(0)
|
|||
|
摘要:
"蜘蛛"(Spider)是Internet上一种很有用的程序,搜索引擎利用蜘蛛程序将Web页面收集到数据库,企业利用蜘蛛程序监视竞争对手的网站并跟踪变动,个人用户用蜘蛛程序下载Web页面以便脱机使用,开发者利用蜘蛛程序扫描自己的Web检查无效的链接……对于不同的用户, 蜘蛛程序有不同的用途。那么,蜘... 阅读全文
posted @ 2007-11-20 20:42 RunSir.cn 阅读(397) 评论(0) 推荐(0)
摘要:
【引自Felomeng的博客】在《爬虫/蜘蛛程序的制作(C#语言)》一文中,已经介绍了爬虫程序实现的基本方法,可以说,已经实现了爬虫的功能。只是它存在一个效率问题,下载速度可能很慢。这是两方面的原因造成的: 1.分析和下载不能同步进行。在《爬虫/蜘蛛程序的制作(C#语言)》中已经介绍了爬虫程序的两... 阅读全文
posted @ 2007-11-20 20:40 RunSir.cn 阅读(1757) 评论(0) 推荐(1) |
|||