摘要: 并发版爬虫, 在上一篇单机版爬虫的基础上演变而来 这里只有并发引擎的代码, 基本的解析器代码参考: https://www.cnblogs.com/ITPower/articles/12450374.html 一. 单节点版爬虫的问题 拉取数据的速度太慢, 慢有两部分. 一部分是网络请求, 根据ur 阅读全文
posted @ 2020-03-11 18:49 盛开的太阳 阅读(531) 评论(0) 推荐(0)