随笔分类 -  爬虫

Xpath string()提取多个子节点中的文本
摘要:我想要把所有li标签中的文本提取出来,并且放到一个字符串中. 在网上查了下发现使用xpath的string()函数可以实现(string()和text()的区别请自行google) 先看下常见的方法: 这是我查到的多数人使用的方法,还有人使用了concat()函数,更麻烦就不提了. 但是上面的匹配明 阅读全文
posted @ 2017-12-14 17:40 雷子-LL 阅读(24856) 评论(0) 推荐(3)
Scrapy框架--cookie的获取/传递/本地保存
摘要:环境:Python3.6 + Scrapy1.4 我要实现的东西:1. 完成模拟登陆         2. 登陆成功后提取出cookie,然后保存到本地cookie.txt文件中    &e 阅读全文
posted @ 2017-12-06 12:07 雷子-LL 阅读(16294) 评论(0) 推荐(0)