梦雨情殇

摘要： 抓取页面数据的时候，有时候我们需要登陆才可以获取页面资源，那么我们需要登陆以后才可以跳转到对应的资源页面，那么我们需要通过模拟登陆，登陆成功以后再次去抓取对应的数据。 首先我们需要通过手动方式来登陆一下，查看一下如何请求登陆 通过下图我们看到真正处理请求的页面是login.php,登陆成功以后跳转到 阅读全文

摘要： 前段时间花了一部分时间学习下正则表达式，总觉得利用正则要做点什么事情，所以想通过爬取页面的方式把一些美女的照片保存下来，其实过程很简单。 1.首先读取页面信息； 2.过滤出来照片的url地址； 3.通过URL地址来保存图片； 阅读全文

摘要： 正则表达式由两种基本字符类型组成：原义（正常）文本字符和元字符。元字符使正则表达式具有处理能力。所谓元字符就是指那些在正则表达式中具有特殊意义的专用字符，可以用来规定其前导字符（即位于元字符前面的字符）在目标对象中的出现模式。 正则表达式由两种基本字符类型组成：原义（正常）文本字符和元字符。元字符使 阅读全文

摘要： python读取文件时提示"UnicodeDecodeError: 'gbk' codec can't decode byte 0x80 in position 205: illegal multibyte sequence" 解决办法1. 解决办法2. 阅读全文

摘要： 最近需要从日志中解析一些业务数据，因为日志中的数据大部分是不规范，所以我这边首先考虑通过正则表达式的方式来解析日志中的数据。 Python 自1.5版本起增加了re 模块，而笔者目前使用的python 3.5.1，下面简单的介绍一下 re.compile,re.match,re.search,re. 阅读全文

摘要： 1.进入vim 编辑模式 2.输入:set magic 3.输入/，然后再次输入正则表达式 阅读全文

摘要： 为了便于项目中对发布的版本进行回滚，所以我们每次发布完成以后自动创建git tag。 1,创建一个Jenkins任务，命名成为push_tag_demo； 2,配置《源码管理》，这里配置比较特殊的地方需要仓库的名字，后面创建tag的时候需要使用； 3，在《构建后操作》操作中选择"Git Publis 阅读全文

摘要： 开发过程中提交代码以后，如何不登录Jenkins就自动触发jenkins 任务来发布软件版本。 1.首先我们创建一个Jenkins任务。 2.选择"构建触发器"->勾选"触发远程构建"->设置身份验证令牌（我们常说的TOKEN） 3.保存任务，浏览器输入url即可自动发布。 url实例：http:/ 阅读全文

摘要： Jmeter 目前属于比较流行的测试工具，即可做自动化测试也可以做性能测试，而且比较方便。 环境准备： Jmeter 运行环境需要跑在java环境，首先需要安装一下java的环境，由于我目前使用的Jmeter是3.1版本，需要jdk1.7以上版本。 Jmeter下载地址：http://jmeter. 阅读全文

摘要： Rinetd是为在一个Unix和Linux操作系统中为重定向传输控制协议(TCP)连接的一个工具，系统内部服务受系统网服限制外部无法访问，需要通过rinetd映射将内网服务转发出来。 1. 下载解压 rinetd 软件包 2.修改端口范围配置项 IP的端口是双字节，也就是256*256-1, 256 阅读全文