【Beta版本发布】爬虫队长装备全面更新!
摘要:
一、Beta阶段目标回顾 1.为了解决Alpha阶段线程异常泛滥的问题,我们需要一个线程池。 2.为了爬取得到的文件正确可用,我们需要一个异常清理器。 3.为了不间断爬取,管理员不必频繁运行程序点,我们需要实现动态爬取。 以上的三个主要目标在Beta开发阶段都得到了实现,除此以外,因为我们本... 阅读全文
posted @ 2016-01-01 22:56 爱码室 阅读(203) 评论(0) 推荐(0) 编辑