摘要：快速配置云服务器为代理服务器主要有10个点，具体配置详情如下。 1、连接vps云主机 拿到新的vps云主机时，首先我们需要安装CentOS系统，安装成功后开启，然后通过Xshell工具进行连接。通过Xshell工具连接云主机时需要注意用户名尽量填为root。 2、测试网络 首先我们需要ping一下是 阅读全文

摘要：由于之前曾受ip代理的成本之苦，那么今天给大家带来adsl自动拨号换代理的保姆级教程。观前须知：此方法的局限性是需要等待拨号后生效的时间（5~10s），首先我们需要了解配置的大概流程： 需要一台vps云服务器 一个Xshell工具 python脚本 我们需要的Xshell工具是用来登录远程服务器的c 阅读全文

摘要：通过对数据的获取，我们已经掌握了一些简单的反爬措施，但是获取到的数据都是加密的，无法直接读取其中的信息。那么我们该怎么解决呢？ 只有通过对加密字体的解密，再将解密字体和加密字体进行replace即可。现在，我们还是以实习僧为例，来看一下其中的解密流程是怎样的。 一、解密前的了解。 首先，观察到数据改 阅读全文

摘要：在各类网站采用了各种各样的反爬虫措施后，其中还有一种就是验证码反爬虫。那么如何将各种各样的验证码进行识别，自动化模拟人类操作验证码点击呢，那么今天我们就来聊一下。 在验证码反爬的类型中，主要有图形验证码（图形和数字随机组成）、点触验证码（词语或四字成语组成）和滑块验证码等。在如今，验证码类型逐渐复杂 阅读全文

摘要：在使用爬虫过程中经常会遇到这样的情况，爬虫最初运行还可以，正常爬取数据，但一杯茶的功夫就会出现报错，比如返回403Forbidden，这时打开网页可能会发现数据为空，原来网页端的信息并未显示，或提示您的IP访问频率太高，又或者弹出一个验证码需要我们去识别，再者过了一会又可以正常访问。 出现上述现象的 阅读全文

摘要：UA伪装 在爬虫过程中许多网站都会存在一些反爬措施，有些防护措施不高，像ua反爬这种只检查浏览器信息的防护措施。简单介绍一下 一、User-Agent简介 用户代理（User-Agent），表示的是用户的浏览器相关信息，该反爬逻辑是通过服务器端验证请求头中的 User-Agent 参数，然后区分是爬 阅读全文