摘要: 一、简介 selenium自动化测试工具,爬虫中主要解决浏览器渲染的问题,过驱动浏览器,完全模拟浏览器的操作,比如跳转、输入、点击、下拉等,来拿到网页渲染之后的结果。 二、安装 模块安装:pip install selenium chrome浏览器驱动下载 http://chromedriver.s 阅读全文
posted @ 2019-10-07 21:25 Sroxi 阅读(221) 评论(0) 推荐(0)
摘要: 要点: 1.resquests模块不支持异步,在需要异步的地方使用aiohttp模块进行替换 2.定义一个 协程函数 ,创建协程任务,将 协程 打包为一个 Task 排入日程准备执行。返回 Task 对象 ​ 获取当前事件循环,开启循环 ​ async def func(arge): ​ task 阅读全文
posted @ 2019-10-07 21:18 Sroxi 阅读(149) 评论(0) 推荐(0)