代码改变世界

文章分类 -  c/c++

转载：Scrapy 轻松定制网络爬虫

2014-09-24 23:34 by ilully0802, 156 阅读, 收藏,
摘要： Scrapy 轻松定制网络爬虫网络爬虫（Web Crawler, Spider）就是一个在网络上乱爬的机器人。当然它通常并不是一个实体的机器人，因为网络本身也是虚拟的东西，所以这个“机器人”其实也就是一段程序，并且它也不是乱爬，而是有一定目的的，并且在爬行的时候会搜集一些信息。例如 Google 就... 阅读全文