2018年1月9日

爬虫优化设计

摘要: 该随笔是在原随笔上进行的优化,原随笔地址:http://www.cnblogs.com/null-qige/p/8028832.html 一、原设计 基于原先设计,当一个任务启动,添加多个spider,每个spider负责一个业务。通过子spider持有父spider的引用来进行业务关联,比如子sp 阅读全文

posted @ 2018-01-09 17:14 阿姆斯特朗回旋炮 阅读(344) 评论(0) 推荐(0) 编辑

导航