随笔分类 -  Scracpy

好用的python爬虫框架
Scracpy爬取图片实例
摘要：非常简单，直接上爬虫代码 遗留问题： 在用xpath匹配的时候用or将两个表达式连接起来匹配不到，只好分开匹配，再把结果合并。原因不明，有知道的朋友还请告知，谢谢 阅读全文
posted @ 2017-03-10 17:41 Gordon0918 阅读(444) 评论(0) 推荐(0)
Scrapy爬虫入门实例
摘要：网上关于Scracpy的讲述已经非常丰富了，而且还有大神翻译的官方文档，我就不重复造轮子了，自己写了一个小爬虫，遇到不少坑，也学到不少东西，在这里给大家分享一下，自己也做个备忘录。 主要功能就是爬取cnvd漏洞库每个漏洞的名称、发布时间，漏洞描述，漏洞编号... 先说下我的环境： 1、Scracpy 阅读全文
posted @ 2017-03-10 15:04 Gordon0918 阅读(720) 评论(0) 推荐(0)