摘要：
XPath 的常用规则： 使用推荐的浏览器，选中自己的标签后选择复制，选择xpath项 阅读全文
随笔分类 - 爬虫
代理的作用
2018-11-14 20:58 by AlfredZKY, 371 阅读, 收藏,
摘要：
代理作用： 1.突破自身ip的访问限制，访问一些不能访问的站点 2.访问一些单位或团体的内部资源 3.提高访问速度 4.隐匿真实IP 代理分类： 1.根据协议分类 2.根据匿名程度分类 阅读全文
Http的请求和响应
2018-11-14 20:44 by AlfredZKY, 353 阅读, 收藏,
摘要：
请求有客户端发起：可分为4个部分，请求方法(Requestmethod)、请求的网址(Request URL)、请求头(Request Headers)、请求体(Request Body) 1.请求方法 常见的有get和post get和post的区别： 1.get请求中的参数包含在URL中，数据可 阅读全文
爬虫基础1 怎么使用浏览器查看网络请求
2018-11-13 15:32 by AlfredZKY, 1632 阅读, 收藏,
摘要：
推荐使用火狐和谷歌浏览器，一般两个对照着看。 下面是两个浏览器对同一个网址的页面进行检查的，对比，火狐直接是中文显示，谷歌则是英文显示。 如下页面是火狐的 如下是谷歌浏览器的 下面是这些字段的介绍： 1.Name:请求的名称，一般是会将URL的最后一部分内容当做名称 2.Satus:响应的状态码，2 阅读全文
selenium 的安装使用
2018-11-12 22:17 by AlfredZKY, 171 阅读, 收藏,
摘要：
直接pip安装 pip install selenium 默认是火狐浏览器，需要安装下面网址的软件，解压后加入到环境变量中就可以了 https://github.com/mozilla/geckodriver/releases/tag/v0.23.0 火狐浏览器也需要添加进环境变量中，然后重启电脑就 阅读全文
浙公网安备 33010602011771号