08 2018 档案

摘要:说在前面:今天把之前写过的壁纸爬虫拿出来用了一下,发现是很久以前写过的,用的还是python基本库urllib去做网络请求的,正好最近在学scrapy,于是就用scrapy框架重新写了一遍。环境要求:python:3.6 Scrapy:1.51正式开始:感谢... 阅读全文
posted @ 2018-08-08 16:11 GF66 阅读(244) 评论(0) 推荐(0)
摘要:最近学习scrapy框架,感受到了scrapy的强大,可能自己还没有学透,感觉有时候数据保存没有那么方便,等技术成熟也许会使用更加灵活,废话不多说,进入今天的主题。 首先,为什么要使用Resquest和Response.follow 按照我的理解,使用sc... 阅读全文
posted @ 2018-08-02 20:52 GF66 阅读(285) 评论(0) 推荐(0)