临冬城城主

摘要： 一、打码的作用 在进行爬虫过程中，部分网站的登录验证码是比较简单的，例如四个英文数字随机组合而成的验证码，有的是全数字随机组成的验证码，有的是全中文随机组成的验证码。为了爬虫进行自动化，需要解决自动登录的问题，而验证码问题成了第一道坎。起初想到用百度AI的图像识别技术进行识别，但识别结果却很差，最后 阅读全文

摘要： 仰望夜空，滿天星斗令人心曠神怡，偶爾劃過天空的流星更令人欣喜。但是你曾想過流星到底是什麼嗎？對著流星許願，真能實現嗎？或者流星是從天上落下的星星呢？流星看似不規則地往天空四面八方散去，有時會同時出現好幾顆，有時苦等好久才見到一顆。其實，流星的出現是有跡可尋的，這就得從流星的形成說起。 太陽系裡，除了 阅读全文

摘要： 一、网卡配置 vim /etc/sysconfig/network-scripts/ifcfg-ens33 ONBOOT='yes' 二、更换Linux语言环境 1.修改配置文件 vim /etc/locale.conf LANG="zh_CN.UTF-8" 2.更改后查看系统语言变量 locale 阅读全文

摘要： 握手过程： websocket-client端通过ws协议向websocket-server端发起连接请求前，首先在自己的请求头中添加Sec-Websocket-Key键值对，值为根据自己账号通过一定的方式生成的字符串，client端发送自己的key后，server端取出并保存该字符串后，将该字符串 阅读全文

摘要： 讲 Python 装饰器前，我想先举个例子，虽有点污，但跟装饰器这个话题很贴切。 每个人都有的内裤主要功能是用来遮羞，但是到了冬天它没法为我们防风御寒，咋办？我们想到的一个办法就是把内裤改造一下，让它变得更厚更长，这样一来，它不仅有遮羞功能，还能提供保暖，不过有个问题，这个内裤被我们改造成了长裤后， 阅读全文

摘要： 在进行计算一个文件夹内容大小的时候，我们要考虑文件夹内都有什么内容，可能都是一个一个的单文件，也有可能都是子文件夹，或者二者都有，既然要计算整个文件夹的大小，我们当然要计算每一个文件的大小以及每一个子文件夹下的每一个子文件。计算每一个文件的大小我们肯定都可以计算到，或者如果我们知道一个文件夹内有子文 阅读全文

摘要： Beautiful is better than ugly. 优美胜于丑陋 Explicit is better than implicit. 明了胜于晦涩 Simple is better than complex. 简洁胜于复杂 Complex is better than complicate 阅读全文

摘要： Python的hashlib提供了很多摘要算法，如MD5，SHA1等常用算法。 什么是摘要算法呢？摘要算法又称哈希算法、散列算法。它通过一个函数，把任意长度的数据转换为一个长度固定的数据串（如MD5值共32位，且每位都是用16进制进行表示）。 摘要算法就是通过摘要函数对任意长度的数据data计算出固 阅读全文

摘要： 1、list中extend方法有趣现象 1.1 List+=Str 与 List.extend(Str) 1.2 List+=Dict 与 List.extend(Dict) 1.3 List+=Tuple 与 List.extend(Tuple) 由以上现象大致得出结论：List += Itera 阅读全文

摘要： 将以上配置信息直接写在自己爬虫项目中的settings.py中最下面即可。。。 scrapy请求流程图： 阅读全文