摘要: 一、反扒策略 1、通过user-agent来判断是不是爬虫。 解决的办法:伪装user-agent客户端标识 2、通过访问频率来判断。 解决的办法:设置请求频率。 time.sleep(random.randint(0,5)) 3、封ip 设置代理ip。 requests.get( url, hea 阅读全文
posted @ 2019-12-03 22:56 佑神 阅读(152) 评论(0) 推荐(0)