摘要：复习爬虫基础 正则 2、正则与re模块简介 概述： 正则表达式，又称规则表达式 正则表达式(regular expression)描述了一种字符串匹配的模式（pattern） 正则匹配是一个 模糊的匹配(不是精确匹配) **re：**python自1.5版本开始增加了re模块，该模块提供了perl风 阅读全文

摘要：解决报错requests.exceptions.ConnectionError: HTTPSConnectionPool(host=‘xxx’, port=443): Max retries exceeded with url 使用requests时出错 解决报错requests.exception 阅读全文

摘要：#js逆向 js常见的加密方式 加密在前端开发和爬虫中是经常遇见的。掌握了加密算法且可以将加密的密文进行解密破解的，也是你从一个编程小白到大神级别质的一个飞跃。且加密算法的熟练和剖析也是很有助于帮助我们实现高效的js逆向。下述只把我们常用的加密方法进行总结。不去深究加密的具体实现方式。 常见的加密算 阅读全文

摘要：1.本套是一个可以随时查看的爬虫模板，方便写爬虫时候用 urllib,request模型 from urlli.request import Request, urlopen from urllib.paarse import urlencode url = '' headers = { 'user 阅读全文

摘要：爬虫的相关的库 urllib,requests,selenium,appium 数据解析 re,xpath,bs4,json 数据存储 pymysql,mongodb,... 任务 多线程，协程，异步 框架 scrapy,scrapy-redis 爬虫库urllib介绍 安装 pip install 阅读全文