原创爬虫开源项目——更新维护

 

 

前言

　　已经有十几天没有更新文章了，但是这些天并没有闲着，状态和封面上的人一样，写代码和思考。。。

最近事宜

　　这些天主要干了些什么事情呢？这个必须要给大家说一下，不然大家以为我消失了呢。这些天一直在维护我github上的两个开源项目，一个是IPProxy(代理IP池)，另一个是spider_smooc(慕课网视频抓取器，无需账号密码)。

这两个项目都在博客园进行了说明：

python开源IP代理池--IPProxys

python爬虫:爬取慕课网视频

IPProxys开源项目

　　IPProxy代理池项目已经拥有60多star,这个项目对于爬虫开发者来说是非常有用的，如果你不想花钱买代理IP,这里面抓取到的免费代理IP还是能满足个人的需要。根据大家提出的问题，主要是修复了一些bug，加强了代理验证的功能，同时添加了一些新的代理网站。但是，抓取到的有用代理IP还是有些少，希望大家提供更多免费的代理IP网址。

github:https://github.com/qiyeboy/IPProxys.

如果你感兴趣，请给我更多的star.

spider_smooc开源项目

　　spider_smooc项目是当初为了快速下载慕课网视频，放到手机上观看的需求(不想在线看)。近期慕课网改变了解析方式，导致视频抓取器失效。本次进行了解析方式的更新，同时添加了使用说明图片。又可以无需账号密码，下载慕课网视频了。

github:https://github.com/qiyeboy/spider_smooc

如果你感兴趣，请给我更多的star.

休息。。。心累

　　这些天真心感觉到打江山容易，守江山难。但我会一如既往地支持开源，贡献我的思想和程序。。。

如果大家觉得还可以呀，记得推荐呦。

 

 

欢迎大家支持我公众号: