摘要: 1,json.loads (字符串转换成Python对象) 2,json.dumps(Python对象转换成字符串) 3,json.load() 读取json文件内容转换为Python类型 例如: 4,json.dump() 将Python内置类型序列化为json对象写入文件 例如: jsonPat 阅读全文
posted @ 2019-07-26 15:29 wy0925 阅读(164) 评论(0) 推荐(0)
摘要: https://www.bilibili.com/video/av49809274/?p=13(ajax请求的抓取, https请求的使用, proxy的使用) 阅读全文
posted @ 2019-07-26 14:17 wy0925 阅读(259) 评论(0) 推荐(0)
摘要: 爬取图片资源 阅读全文
posted @ 2019-07-26 10:26 wy0925 阅读(209) 评论(0) 推荐(0)
摘要: 说一下我的爬取过程吧 第一步: 当然是 scrapy startproject + 名字 新建爬虫项目 第二步: scrapy genspider -t crawl +爬虫名字+ 所爬取网站的域名 (-t crawl是全站爬虫) 第三步: 最后执行爬虫代码 scrapy crawl + 爬虫名字 阅读全文
posted @ 2019-07-26 10:16 wy0925 阅读(459) 评论(0) 推荐(0)