摘要: 一、介绍 selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 selenium本质是通过驱动浏览器,完全模拟浏览器的操作,比如跳转、输入、点击、下拉等,来拿到网页渲染之后的结果,可支持多种浏览器 from selenium 阅读全文
posted @ 2019-11-26 20:50 只会玩辅助 阅读(270) 评论(0) 推荐(0)
摘要: 一、介绍 Beautiful Soup是一个可以从HTML或XML文件中提取数据的python库。 #安装Beautiful Soup pip install beautifulsoup4 #安装解析器 Beatiful Soup支持python标准库中的HTML解析器,还支持一些第三方的解析器,其 阅读全文
posted @ 2019-11-26 19:45 只会玩辅助 阅读(288) 评论(0) 推荐(0)