2020年2月18日
工作问题--------爬虫遇到requests.exceptions.ConnectionError: HTTPSConnectionPool Max retries exceeded
摘要： 问题描述：爬取京东的网站，爬取一段时间后报错。 经过一番查询，发现该错误是因为如下： http的连接数超过最大限制，默认的情况下连接是Keep-alive的，所以这就导致了服务器保持了太多连接而不能再新建连接。 ip被封 程序请求速度过快。 解决办法如下： 第一种方法 try: page1 = re 阅读全文
posted @ 2020-02-18 15:33 正在加载中… 阅读(1287) 评论(0) 推荐(0)