微博爬虫实践---搜索关键词
摘要:需求:指定搜索关键词,限定时间段、原创,抓取后存入EXcel或者Mysql 原理:模拟浏览器打开网址,输入关键词,python解析dom获取需要信息,存入excel或者mysql 技术点: 1.爬虫框架选取 BS4解析 2.模拟浏览器行为 python+selenium+Firefox 3.存档 e
阅读全文
posted @
2018-06-29 14:59
OnTest
阅读(1315)
推荐(0)
接口实践--演练地址集合
摘要:Bing https://cn.bing.com/HPImageArchive.aspx?format=js&idx=0&n=1&nc=1361089515117&FORM=HYLH1 { "images": [{ "startdate": "20180606", "fullstartdate":
阅读全文
posted @
2018-06-07 14:47
OnTest
阅读(155)
推荐(0)
Locust学习--Locust远程部署要点
摘要:【简介】Locust是一个基于Python(Python 2.6+,不支持Python 3)的支持分布式的压力测试工具,能够测试系统的并发处理能力,可以用来测试Web服务或者其他业务。在测试过程中,会产生大量的用户(Locusts蝗群)对系统进行攻击,每个用户(Locust蝗虫)的行为是通过Pyth
阅读全文
posted @
2018-06-07 10:28
OnTest
阅读(761)
推荐(0)