随笔分类 -  scrapy

requests模块的使用
摘要：request模块的使用，response属性，requests携带cookies的方式，超时参数的使用 阅读全文
posted @ 2019-06-16 10:51 心存温柔安静生长 阅读(897) 评论(0) 推荐(0)
scrapy.Request使用meta传递数据，以及deepcopy的使用
摘要：scrapy.Request使用meta传递数据,浅拷贝与深拷贝,copy and deepycopy 阅读全文
posted @ 2019-06-13 12:05 心存温柔安静生长 阅读(2744) 评论(0) 推荐(0)
scrapy爬取数据的基本流程及url地址拼接
摘要：初学爬虫的基本流程，如何定义item，构造下一页url，url地址拼接 阅读全文
posted @ 2019-06-10 10:02 心存温柔安静生长 阅读(5335) 评论(0) 推荐(2)