爬虫抓取存档 - 随笔分类 - OnTest

微博爬虫实践---搜索关键词

摘要：需求：指定搜索关键词，限定时间段、原创，抓取后存入EXcel或者Mysql 原理：模拟浏览器打开网址，输入关键词，python解析dom获取需要信息，存入excel或者mysql 技术点： 1.爬虫框架选取 BS4解析 2.模拟浏览器行为 python+selenium+Firefox 3.存档 e 阅读全文

posted @ 2018-06-29 14:59 OnTest 阅读(1313) 评论(0) 推荐(0)

爬虫实践-优惠活动信息抓取

摘要：优惠活动抓取：下载地址：下载优惠信息阅读全文

posted @ 2018-05-15 17:39 OnTest 阅读(288) 评论(0) 推荐(0)

爬虫实践-微博关键词搜索抓取

摘要：关键词： 1.终于离婚了 2.提离职 3.相亲对象 4.给我的教训下载地址：微博关键词抓取终于离婚了微博关键词抓取提离职微博关键词抓取相亲对象微博关键词抓取给我的教训阅读全文

posted @ 2018-05-15 17:05 OnTest 阅读(830) 评论(0) 推荐(0)

爬虫实践-拉勾网测试经理JD抓取【2018.05.15】

摘要：岗位：测试经理年限：5-10 区域：上海文档下载：测试经理JD下载阅读全文

posted @ 2018-05-15 16:59 OnTest 阅读(259) 评论(0) 推荐(0)

随笔分类 - 爬虫抓取存档