随笔分类 - Python爬虫

摘要：selenium是一个自动化测试工具，支持Firefox，Chrome等众多浏览器在爬虫中的应用主要是用来解决JS渲染的问题。 1.使用前需要安装这个第三方库，CMD下： pip install selenium 2.为你的测试浏览器下载驱动，我用的是Chrome，对应的去百度一下Chrome w 阅读全文

posted @ 2017-11-23 21:11 agentfitz 阅读(13073) 评论(3) 推荐(1)

python爬虫---requests库的用法

摘要：requests是python实现的简单易用的HTTP库，使用起来比urllib简洁很多因为是第三方库，所以使用前需要cmd安装 pip install requests 安装完成后import一下，正常则说明可以开始使用了。基本用法： requests.get()用于请求目标网站，类型是一个H 阅读全文

posted @ 2017-11-22 21:21 agentfitz 阅读(192896) 评论(1) 推荐(9)