随笔分类 -  爬虫

爬虫--scrapy
摘要：电影天堂爬虫实例 将要通过代码实现的是：找到其中是最新电影并且评分高于8.0的电影。 第一步代码实现： 上述代码就是只用requests模块最简单的方式进行爬虫。 缺点： 手动查找页码的url，还好电影天堂是页码url固定，不然就得一个一个页面的访问。 代码是阻塞同步的，遇到网络卡顿直接down无结 阅读全文
posted @ 2017-03-09 10:31 gege4105 阅读(316) 评论(0) 推荐(0)
爬虫--微信公众平台登录
摘要：一 注册登录分析模式 第一步：打开https://mp.weixin.qq.com/进入登陆界面 第二步：输入账号密码点击登陆 第三步：等待跳转后扫码验证 第四步：进入主页面 通过简单手法的查看chrome浏览器的network发现发送的密码经过了加密。 二 相关知识点 requests模块 新建一 阅读全文
posted @ 2017-02-11 11:27 gege4105 阅读(3796) 评论(0) 推荐(0)