随笔分类 - 爬虫
摘要:1.准备工作: chromedriver 的安装请自行百度。我们直奔主题。 起飞前请确保准备工作以就绪... 2.分析网页: 目标网址:https://www.jd.com/ 所有item均保存在class="gl-item"里面 需求: 使用selenium 驱动浏览器自动侦测到input输入框,
阅读全文
摘要:1.准备工作: 网址:https://lishi.tianqi.com/xian/index.html 爬虫类库:PyQuery,requests 2.网页分析: 红线部分可更改为需要爬取的城市名,如:beijing 红框选中部分即为我们所需要爬取的每个月份的信息. 目测应该是ui li,使用Chr
阅读全文