摘要：wget是linux/unix下通常使用的下载http/ftp的数据，使用非常方便，其实wget目前经过编译，也可在windows下使用。最近需要下载大量的遥感数据，使用了python写了批处理下载程序，使用的是urllib的urlretrieve进行下载，数据下载还可以，但是界面交互性不好看。就根据自己在linux下载数据进行了改进。 1. wget在windows下的安装： 从网站下载wget... 阅读全文

摘要：程序说明：最近学习origin，看到官网有入门视频（http://www.originlab.com/index.aspx?go=SUPPORT/VideoTutorials），看着挺多的，就用python写了个简单的爬虫程序，把origin的这些视频下载下来了。利用了requests和bs4解析html，利用re.match方法匹配获取相关连接，最后下载。程序代码没有进行进一步整理，看着有些乱。... 阅读全文

摘要：上午起来提不起劲，于是就用电脑看漫画，但是在线看漫画好烦，就想下下来看。一个一个点太麻烦，于是花了点时间用python写了个demo，把爱漫画的漫画下载下来，这样就可以随时随地看了。这也是我首次尝试用python写不是数据处理的东西，还是很开心的。 做的具体思路就是利用python提供的urllib... 阅读全文

摘要：为了收集笑话也是挺拼的，我就不相信你所有的都看过了。还有，请问哪位仁兄能指点之下怎么把网上抓取到的图片写到word里面，捉摸了好久都没弄出来。 糗百不需要登录，html直接解析，只要在request的时候加上header就行了，是本菜鸟入手的最佳选择。重点就是正则表达式的匹配上花了很多时间，然后利... 阅读全文

摘要：在数据的常见分布中，有一种是一对多存储的数据，即一个是key，其他改key对应的多个value。例如气象数据等，每天有很多组，又或者是一个球员，他每天得多少分等等。我做这个东西有三种方法，即：常规编程法，数据库查询法以及pandas包提供的group方法。第一种方法我自己写出的代码比较繁琐，这里不做... 阅读全文