摘要: 有时候在win中运行代码会遇到题目中的报错问题: "UnicodeEncodeError: 'gbk' codec can't encode character '\xa0' in position XXX",让人摸不着头脑的是程序开头的编码设置# coding:utf-8 和数据流IO操作时的编码 阅读全文
posted @ 2019-10-16 21:14 eddilelau 阅读(4818) 评论(1) 推荐(0) 编辑
摘要: 1 def getSession(): 2 headers={ 3 'User-Agent': getRandomAgent(), 4 } 5 session=requests.Session() # 创建session对象s 6 session.headers.update(headers) 7 阅读全文
posted @ 2019-10-11 14:39 eddilelau 阅读(204) 评论(0) 推荐(0) 编辑
摘要: scrapy.FormRequest 通过FormRequest函数实现向服务器发送post请求,请求参数需要配合网站设计发送特殊参数。 scrapy.FormRequest.from_response FormRequest.from_response模拟浏览器点击行为向服务器发送post请求 只 阅读全文
posted @ 2019-10-03 10:31 eddilelau 阅读(1029) 评论(0) 推荐(0) 编辑