随笔分类 -  python

Python日志产生器
摘要：Python日志产生器 写在前面 有的时候，可能就是我们做实时数据收集的时候，会有一个头疼的问题就是，你会发现，你可能一下子，没有日志的数据源。所以，我们可以简单使用python脚本来实现产生实时的数据，这样就很方便了 在编写代码之前，我们得知道我们的webserver日志到底长什么样，下面我找了一 阅读全文
posted @ 2018-10-31 14:42 liuge36 阅读(399) 评论(0) 推荐(0)
使用JSP+Servlet+Jdbc+Echatrs实现对豆瓣电影Top250的展示
摘要：使用JSP+Servlet+Jdbc+Echatrs实现对豆瓣电影Top250的展示 写在前面: 有的小伙伴，会吐槽啦，你这个标题有点长的啊。哈哈 ，好像是的！不过，这个也是本次案例中使用到的关键技术。如果，你正愁不会的数据可视化，那么我接下来，我会带你一步一步的实现这个数据可视化的功能。 效果图： 阅读全文
posted @ 2018-10-31 14:40 liuge36 阅读(490) 评论(0) 推荐(0)
Centos7搭建Scrapy爬虫环境
摘要：写在前面 因为之前的爬虫环境一直是部署在我自己本地的电脑上的,最近,写了一个监控别人空间的爬虫,需要一直线上24小时运行,所有就打算云服务器上部署环境,也捣鼓了好一会才弄好,还是有一些坑,这里先记录一下,方便以后复习... 一.替换pyhton2版本为python3 1.我这里的云服务器是Cento 阅读全文
posted @ 2018-10-31 14:32 liuge36 阅读(745) 评论(0) 推荐(0)
Anaconda基本认识
摘要：Anaconda Distribution是执行Python数据科学和机器学习最简单的方法。 它包括250多种流行的数据科学软件包，以及适用于Windows，Linux和MacOS的 conda 软件包和虚拟环境管理器。 Conda使安装，运行和升级复杂的数据科学和机器学习环境（如Scikit le 阅读全文
posted @ 2018-10-31 14:30 liuge36 阅读(194) 评论(0) 推荐(0)
Python爬虫入门
摘要：写在前面 学习爬虫也很久了,但是一直没有整理自己的笔记,然后,今天整理的是慕课网 疯狂的蚂蚁crazyant 老师的《Python开发简单爬虫》这门课程的内容,大家也可以关注一下这位老师,讲得很不错,这边文章中也加上了自己的一些见解,如有错误,告诉我一下,谢谢 什么是爬虫 从百度词条中,我们可以知道 阅读全文
posted @ 2018-10-31 14:29 liuge36 阅读(256) 评论(0) 推荐(0)
简单python爬虫案例(爬取慕课网全部实战课程信息)
摘要：技术选型 下载器是Requests 解析使用的是正则表达式 效果图: 准备好各个包 开始编写代码,new一个py文件 1.requests下载页面 这里需要注意编码的问题; 就像下面这样： 这样返回的就是一个string类型的数据 2.except RequestException:捕捉异常 为了代 阅读全文
posted @ 2018-10-31 14:28 liuge36 阅读(2988) 评论(0) 推荐(0)
Python 爬虫监控女神的QQ空间新的说说,实现邮箱发送
摘要：主要实现的功能就是:监控女神的 QQ空间,一旦女神发布新的说说,你的邮箱马上就会收到说说内容,是不是想了解一下 先看看代码运行效果图: PS:只有你有一台云服务器你就可以把程序24h运行起来 直接上代码: 如果你有什么好的建议可以留言呢 有什么问题也可以留言,我会尽量第一时间回复你的 阅读全文
posted @ 2018-10-31 14:18 liuge36 阅读(371) 评论(0) 推荐(0)
Python 爬虫监控女神的QQ空间新的说说,实现秒赞,并发送说说内容到你的邮箱
摘要：这个文章主要是在 "前一篇文章" 上新增了说说秒赞的功能 前一篇文章可以 "了解一下" 那么,这次主要功能就是 监控女神的 QQ空间,一旦女神发布新的说说,马上点赞,你的邮箱马上就会收到说说内容,是不是想了解一下 直接上代码吧: 还是那样,如果你有什么好的建议可以留言呢 有什么问题也可以留言,我会尽 阅读全文
posted @ 2018-10-31 14:17 liuge36 阅读(523) 评论(0) 推荐(0)
windows下虚拟环境virtualenv的简单操作
摘要：使用豆瓣源安装(推荐) 【推荐】 "python3.X安装和pip安装方法" pip install i https://pypi.douban.com/simple XXX 1.安装virtualenv pip install virtualenv 2一旦virtualenv过多，就蛋疼了，接下来 阅读全文
posted @ 2018-10-31 14:16 liuge36 阅读(946) 评论(0) 推荐(0)