摘要: selenium: 是自动化测试工具,我们可以用它来进行爬虫。 可以驱动浏览器,执行自定义好的任务。 可以执行js代码 执行速度慢,效率低。 一般用于做登录的认证 基本选择器: find_element_by_id() # 根据id查找标签 find_element_by_class_name() 阅读全文
posted @ 2019-06-01 21:00 夜晚的潜水艇 阅读(190) 评论(0) 推荐(0)
摘要: Beautiful: - 基本使用 from bs4 import BeautifulSoup 解析库: BeautifulSoup4 - 安装: - 解析库安装 pip3 install beautifulsoup4 - 解析器安装 pip3 install lxml - 基本使用 - 导入模块 阅读全文
posted @ 2019-06-01 20:58 夜晚的潜水艇 阅读(204) 评论(0) 推荐(0)
摘要: Scrapy笔记: 一 安装: pip3 install wheel pip3 install lxml pip3 install pyopenssl pip3 install -i https://mirrors.aliyun.com/pypi/simple/ pypiwin32 下载文件(twi 阅读全文
posted @ 2019-06-01 20:57 夜晚的潜水艇 阅读(175) 评论(0) 推荐(0)