会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
荆棘谷三季稻
博客园
首页
新随笔
联系
订阅
管理
2020年12月27日
爬虫-Scrapy(三) 翻页的实现
摘要: 1.翻页的实现 上一篇实现了单页的爬取,再加3行代码就可以实现翻页了。 基本思路是查找页面中‘下一页’按钮对应的href地址,然后回调parse方法实现循环,直至找不到'下一页'的链接为止。 代码: import scrapy import re from scpy1.items import Sc
阅读全文
posted @ 2020-12-27 18:44 荆棘谷三季稻
阅读(925)
评论(0)
推荐(0)
公告