摘要：我最近在琢磨scrapy爬虫框架，在windows中安装scrapy遇到了不少坑；直接 pip install scrapy 安装不成功的，百度说要安装vc2008+等等，安装这些时间太长，最后找到一种方法，是经过编译之后的scrapy，直接安装就ok。 下面就是安装步骤: 1、去该网址下载：scr 阅读全文

摘要：该脚本的目的：获取博客的排名和积分，将抓取时间，排名，积分存入数据库，然后把最近的积分和排名信息进行绘图，查看积分或者排名的变化情况。 整个脚本的流程：是利用python3来编写，利用selnium获取网页的信息，使用re正则表达式解析积分score和排名rank，用pymysql连接mysql数据 阅读全文