Fork me on GitHub

随笔分类 -  【数据挖掘&数据可视化与分析】

如何实现并应用决策树算法？
摘要：本文对决策树算法进行简单的总结和梳理，并对著名的决策树算法ID3(Iterative Dichotomiser 迭代二分器)进行实现，实现采用Python语言，一句老梗，“人生苦短，我用Python”，Python确实能够省很多语言方面的事，从而可以让我们专注于问题和解决问题的逻辑。 根据不同的数据 阅读全文
posted @ 2016-04-24 23:28 whatbeg 阅读(6631) 评论(5) 推荐(10)
【Python模拟登录】RSA加密与重放方式登录 -以模拟登录博客园为例
摘要：Python模拟登录第一弹见：【Python数据分析】Python模拟登录(一) requests.Session应用上次的登录是最基本的，全部是明文，而且在浏览器中就可以看到POST的数据。接下来我们来个稍微难一点的–模拟登录博客园(http://www.cnblogs.com) 登录特点：用户名 阅读全文
posted @ 2016-04-15 11:57 whatbeg 阅读(2527) 评论(1) 推荐(0)
【Python数据分析】四级成绩分布 -matplotlib,xlrd 应用
摘要：最近获得了一些四级成绩数据，大概500多个，于是突发奇想是否能够看看这些成绩数据是否满足所谓的正态分布呢？说干就干，于是有了这篇文章。文章顺带介绍了xlrd模块的一些用法和matplotlib画自定义数据的条形图和随机的条形图的一些方法，并且提供了一些相关链接，可作为学习matplotlib和num 阅读全文
posted @ 2016-04-14 11:52 whatbeg 阅读(2393) 评论(0) 推荐(2)
【Python数据分析】Python3多线程并发网络爬虫-以豆瓣图书Top250为例
摘要：基于上两篇文章的工作 【Python数据分析】Python3操作Excel-以豆瓣图书Top250为例 【Python数据分析】Python3操作Excel(二) 一些问题的解决与优化 已经正确地实现豆瓣图书Top250的抓取工作，并存入excel中，但是很不幸，由于采用的串行爬取方式，每次爬完25 阅读全文
posted @ 2016-03-29 18:37 whatbeg 阅读(9453) 评论(1) 推荐(2)
【Python数据分析】Python3操作Excel(二) 一些问题的解决与优化
摘要：继上一篇【Python数据分析】Python3操作Excel-以豆瓣图书Top250为例 对豆瓣图书Top250进行爬取以后，鉴于还有一些问题没有解决，所以进行了进一步的交流讨论，这期间得到了一只尼玛的帮助与启发，十分感谢！ 上次存在的问题如下： 1.写入不能继续的问题 2.在Python IDLE 阅读全文
posted @ 2016-03-28 16:55 whatbeg 阅读(8336) 评论(12) 推荐(2)
【Python数据分析】Python3操作Excel-以豆瓣图书Top250为例
摘要：本文利用Python3爬虫抓取豆瓣图书Top250，并利用xlwt模块将其存储至excel文件，图片下载到相应目录。旨在进行更多的爬虫实践练习以及模块学习。 工具 1.Python 3.5 2.BeautifulSoup、xlwt模块 开始动手 首先查看目标网页的url： https://book. 阅读全文
posted @ 2016-03-28 00:03 whatbeg 阅读(8026) 评论(10) 推荐(6)
【Python数据分析】Python模拟登录(一) requests.Session应用
摘要：最近由于某些原因，需要用到Python模拟登录网站，但是以前对这块并不了解，而且目标网站的登录方法较为复杂， 所以一下卡在这里了，于是我决定从简单的模拟开始，逐渐深入地研究下这块。 注：本文仅为交流学习所用。 登录特点：明文传输，有特殊标志数据 会话对象requests.Session能够跨请求地保 阅读全文
posted @ 2016-03-27 13:52 whatbeg 阅读(80958) 评论(6) 推荐(9)
【Python数据分析】工作日发文章比周末发文章访问量高？
摘要：前言 看前面有位朋友分析了一下每天某个时间发文章的访问量区别，以讨论非系统性因素对文章访问量的影响。之所以进一步讨论工作日和周末发文对文章访问量的影响，一是觉得很有意思，二是毕业设计与此有很大关系，三是觉得还是有点意义的，于是决定做一下这个工作。那么到底周末发文的访问量是不是总体来说比工作日低呢，请 阅读全文
posted @ 2016-01-18 06:02 whatbeg 阅读(1773) 评论(11) 推荐(10)
【Python数据分析】简单爬虫 爬取知乎神回复
摘要：看知乎的时候发现了一个 “如何正确地吐槽” 收藏夹，里面的一些神回复实在很搞笑，但是一页一页地看又有点麻烦，而且每次都要打开网页，于是想如果全部爬下来到一个文件里面，是不是看起来很爽，并且随时可以看到全部的，于是就开始动手了。工具1.Python 2.72.BeautifulSoup分析网页我... 阅读全文
posted @ 2015-01-03 18:59 whatbeg 阅读(10679) 评论(18) 推荐(9)
【Python数据分析】从Web收集数据小实例
摘要：最近在看《鲜活的数据：数据可视化指南》，学习一些数据可视化与数据分析的技术，本例是该书第一章的一个例子衍伸而来。实例内容：从www.wunderground.com收集美国纽约州布法罗市（水牛城）2014年3月份每天最高气温，并导入Excel或WPS表格，制做成折线图。工具准备：安装好的Python... 阅读全文
posted @ 2014-04-04 13:10 whatbeg 阅读(6001) 评论(0) 推荐(2)