摘要: ##性能相关-进程、线程、协程在编写爬虫时,性能的消耗主要在IO请求中,当单进程单线程模式下请求URL时必然会引起等待,从而使得请求整体变慢。串行执行```import requestsdef fetch_async(url): response = requests.get(url) return responseurl_list = ['http://www.github.com'... 阅读全文
posted @ 2017-07-03 14:14 ccorz 阅读(668) 评论(0) 推荐(2) 编辑