2021年2月26日
摘要: 一、背景 因为经常有爬虫数据处理的需求,之前一直用的多线程+requests方式爬虫,但是这种方式有两个问题: 1、当请求很多,并发稍微多一点的时候电脑特别卡 2、每次变更请求包,比如post换get,需要用不同的方式解析出header等数据不是很方便 主要基于这两个原因,搞了一个基于socket+ 阅读全文
posted @ 2021-02-26 19:18 xugongzi 阅读(173) 评论(0) 推荐(0)