摘要: selenium 简介 selenium使用JavaScript模拟真实用户对浏览器进行操作。测试脚本执行时,浏览器自动按照脚本代码做出点击,输入,打开,验证等操作,就像真实用户所做的一样,从终端用户的角度测试应用程序。 与python集成 from selenium import webdrive 阅读全文
posted @ 2019-03-27 11:09 wuweishuo 阅读(284) 评论(0) 推荐(0)
摘要: scrapy 简介 Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。 其最初是为了 页面抓取 (更确切来说, 网络抓取 )所设计的, 也可以应用在获取API所返回的数据(例如 Amazon Associates W 阅读全文
posted @ 2019-03-27 11:08 wuweishuo 阅读(235) 评论(0) 推荐(0)
摘要: lxml 简介 lxml使用xpath对xml进行解析,XPath 是一门在 XML 文档中查找信息的语言。XPath 可用来在 XML 文档中对元素和属性进行遍历。 参考官方文档: "https://lxml.de/index.html" xpath语法 选取节点 表达式 |描述 | nodena 阅读全文
posted @ 2019-03-27 11:07 wuweishuo 阅读(659) 评论(0) 推荐(0)
摘要: 介绍 requests是python实现的简单易用的HTTP库,使用起来比urllib简洁很多 基本使用 get 下面凡科微传单获取模板的接口为例子 post 一样以凡科微传单接口为例 会话对象 在上面操作中request不会持有cookie对象导致每次请求都是新的会话,requests库提供了se 阅读全文
posted @ 2019-03-27 10:57 wuweishuo 阅读(316) 评论(0) 推荐(0)