2019年12月9日
scrapy框架基于管道的持久化存储
摘要： scrapy框架的使用 基于管道的持久化存储的编码流程 在爬虫文件中数据解析 将解析到的数据封装到一个叫做 类型的对象 将 类型的对象提交给 负责调用 的方法接收 ，然后进行某种形式的持久化存储 在配置文件中开启管道 注意事项： 全栈数据的爬取 手动请求的发送 总结：什么时候用yield 如何发送p 阅读全文
posted @ 2019-12-09 19:49 adrian-boy 阅读(359) 评论(0) 推荐(0)