随笔分类 -  python

windows 安装 Scrapy的套路
摘要：我最近在琢磨scrapy爬虫框架，在windows中安装scrapy遇到了不少坑；直接 pip install scrapy 安装不成功的，百度说要安装vc2008+等等，安装这些时间太长，最后找到一种方法，是经过编译之后的scrapy，直接安装就ok。 下面就是安装步骤: 1、去该网址下载：scr 阅读全文
posted @ 2017-03-04 09:13 小石头tester 阅读(237) 评论(0) 推荐(0)
获取博客积分排名，存入数据库，读取数据进行绘图(python,selenium,matplotlib)
摘要：该脚本的目的：获取博客的排名和积分，将抓取时间，排名，积分存入数据库，然后把最近的积分和排名信息进行绘图，查看积分或者排名的变化情况。 整个脚本的流程：是利用python3来编写，利用selnium获取网页的信息，使用re正则表达式解析积分score和排名rank，用pymysql连接mysql数据 阅读全文
posted @ 2017-03-01 20:34 小石头tester 阅读(2508) 评论(0) 推荐(0)
python,hashlib模块
摘要：hashlib模块的使用： 阅读全文
posted @ 2017-02-25 15:42 小石头tester 阅读(186) 评论(0) 推荐(0)
python，itertools模块
摘要：itertools模块的使用： 阅读全文
posted @ 2017-02-25 15:39 小石头tester 阅读(342) 评论(0) 推荐(0)
Python,collections模块
摘要：对collections相关方法进行学习和测试： 阅读全文
posted @ 2017-02-25 14:49 小石头tester 阅读(300) 评论(0) 推荐(0)
Python，datetime模块实例
摘要：Python的标准模块datetime模块，在我们的工作中应用非常频繁，下面对datetime中常用的方法进行了总结和测试；对每一个方法都使用了单元测试框架Unittest来配合测试。 主要的类型有： 首先要导入datetime模块：from datetime import datetime, ti 阅读全文
posted @ 2017-02-22 20:27 小石头tester 阅读(1138) 评论(0) 推荐(0)