2018年6月26日

pyinstaller对多进程程序的打包

摘要: 在使用python的第三方库pyinstaller对多进程程序进行打包时,程序不能正常的运行,但是后台却有多个进程一直在使用资源。 解决方法很简单,在if __name__ == '__main__':后添加一句代码multiprocessing.freeze_support()就可以了。 然后在p 阅读全文

posted @ 2018-06-26 08:58 月见空青 阅读(1083) 评论(0) 推荐(0)

2018年6月25日

python3爬虫爬取煎蛋网妹纸图片(下篇)2018.6.25有效

摘要: 分析完了真实图片链接地址,下面要做的就是写代码去实现了。想直接看源代码的可以点击这里 大致思路是:获取一个页面的的html >使用正则表达式提取出图片hash值并进行base64解码 >将解码得到的结果进行拼接替换,得到原始图片地址 >对图片地址进行请求,对返回的content进行保存 >扩展到多个 阅读全文

posted @ 2018-06-25 10:41 月见空青 阅读(308) 评论(0) 推荐(0)

2018年6月24日

python3爬虫爬取煎蛋网妹纸图片(上篇)

摘要: 其实之前实现过这个功能,是使用selenium模拟浏览器页面点击来完成的,但是效率实际上相对来说较低。本次以解密参数来完成爬取的过程。 首先打开煎蛋网http://jandan.net/ooxx,查看网页源代码。我们搜索其中一张图片的编号,比如3869006,看下在源代码中是否能找到图片链接 从上面 阅读全文

posted @ 2018-06-24 21:47 月见空青 阅读(901) 评论(0) 推荐(0)

2018年6月22日

利用PyPDF2删除PDF文件首页

摘要: 前话:有个朋友让我给他编辑他们公司的PDF文件,签名的日期时间不对,需要进(nong)行(xu)优(zuo)化(jia)。而我手上只有两个管理pdf的软件,一个福晰阅读器,还有一个福晰编辑器。但是阅读器只能阅读,所以只能用福析编辑器进行编辑了,虽然编辑起来很方便,但是免费版保存下多了一页首页广告。手 阅读全文

posted @ 2018-06-22 20:52 月见空青 阅读(735) 评论(0) 推荐(0)

2018年6月18日

python3 base64解码出现TypeError:Incorrect padding

摘要: 今天在解决爬虫对加密参数的分析时,需要使用到base64解码。但是过程中出现了TypeError:Incorrect padding的错误提示。以下是解决方法,以便查阅。 其实正常使用base64是不会出现问题的,就比如下面的代码。 上面代码的编码结果是完整的,所以直接解码出来没有问题。如果编码结果 阅读全文

posted @ 2018-06-18 20:11 月见空青 阅读(7143) 评论(0) 推荐(0)

2018年6月17日

win7 office2016 激活(2018.6.17测试可用)

摘要: 坑比的一天,啥也没学,净用来折腾了office2016的安装了。 虽然有个wps可以用,但是真心的卡啊,用不惯就卸载了。虽然是卸载了,也埋了很多坑给我。 还是说office2016吧,网上到处找激活工具,心里又各种担惊受怕,要不小心中毒真的就呵呵了。 最后在https://onebox.site/a 阅读全文

posted @ 2018-06-17 17:51 月见空青 阅读(2227) 评论(0) 推荐(0)

2018年6月16日

python3类方法,实例方法和静态方法

摘要: 今天简单总结下python的类方法,实例方法,静态方法。 python默认都是实例方法,也就是说,只能实例对象才能调用这个方法。 那是不是说类方法也只能被类对象本身来调用呢,当然,不是。类方法既可以被类对象调用,也可以被实例对象调用。你可以这样理解,假设我现在定义的是‘dog狗’,它有一个类方法‘啃 阅读全文

posted @ 2018-06-16 09:08 月见空青 阅读(602) 评论(0) 推荐(0)

2018年6月15日

python3爬虫爬取网页思路及常见问题(原创)

摘要: 学习爬虫有一段时间了,对遇到的一些问题进行一下总结。 爬虫流程可大致分为:请求网页(request),获取响应(response),解析(parse),保存(save)。 下面分别说下这几个过程中可以出现的问题: 一、请求网页:向网站服务器发送请求 你可以这样理解,你在浏览器输入xxjpg.com, 阅读全文

posted @ 2018-06-15 15:38 月见空青 阅读(1315) 评论(0) 推荐(0)

导航