摘要: scrapy参数-COOKIES_ENABLED 当COOKIES_ENABLED是注释的时候scrapy默认没有开启cookie 当COOKIES_ENABLED没有注释,设置为False的时候scrapy默认使用了settings里面的cookie 当COOKIES_ENABLED设置为True 阅读全文
posted @ 2021-09-09 15:31 子彦 阅读(353) 评论(1) 推荐(0) 编辑
摘要: Linux中,日志所在的位置: /var/log/messages 系统默认的日志 /var/log/secure 记录用户的登录信息 查看日志的方法有很多 :head tail less 推荐使用:less (一页一页查看文件内容) 数据量大时,使用less查看 less的使用方法: 空格 : 表 阅读全文
posted @ 2019-11-15 15:02 子彦 阅读(140) 评论(0) 推荐(0) 编辑
摘要: Chardet字符编码探测器,可以自动检测文本、网页、xml的编码。 colorama主要用来给文本添加各种颜色,并且非常简单易用。 Prettytable主要用于在终端或浏览器端构建格式化的输出。 difflib,[Python]标准库,计算文本差异 Levenshtein,快速计算字符串相似度。 阅读全文
posted @ 2019-01-24 10:33 子彦 阅读(3271) 评论(0) 推荐(0) 编辑
摘要: nginx概述 nginx是一款自由的、开源的、高性能的HTTP服务器和反向代理服务器;同时也是一个IMAP、POP3、SMTP代理服务器;nginx可以作为一个HTTP服务器进行网站的发布处理,另外nginx可以作为反向代理进行负载均衡的实现。 这里主要通过三个方面简单介绍nginx 反向代理 负 阅读全文
posted @ 2019-01-07 18:26 子彦 阅读(197) 评论(0) 推荐(0) 编辑
摘要: 收集整理了15个常用的javaScript正则表达式,其中包括用户名、密码强度、整数、数字、电子邮件地址(Email)、手机号码、身份证号、URL地址、 IPv4地址、 十六进制颜色、 日期、 QQ号码、 微信号、车牌号、中文正则。表单验证处理必备,赶紧收藏吧! 1 用户名正则 2 密码强度正则 3 阅读全文
posted @ 2018-12-25 14:15 子彦 阅读(480) 评论(0) 推荐(0) 编辑
摘要: Redis开发建议 最后附上Redis的一些开发规范和建议: 1.冷热数据分离,不要将所有数据全部都放到Redis中 虽然Redis支持持久化,但是Redis的数据存储全部都是在内存中的,成本昂贵。建议根据业务只将高频热数据存储到Redis中【QPS大于5000】,对于低频冷数据可以使用MySQL/ 阅读全文
posted @ 2018-12-18 15:31 子彦 阅读(371) 评论(0) 推荐(0) 编辑
摘要: 1.可以建临时表,将数据拉到本地,插入本地临时表(耗时操作),再从本地一次性插入所需表 阅读全文
posted @ 2018-06-13 19:12 子彦 阅读(431) 评论(0) 推荐(0) 编辑
摘要: """最近遇到一个情景,就是定期生成并发送服务器使用情况报表,按照不同维度统计,涉及python对excel的操作,上网搜罗了一番,大多大同小异,而且不太能满足需求,不过经过一番对源码的"研究"(用此一词让我觉得颇有成就感)之后,基本解决了日常所需。主要记录使用过程的常见问题及解决。 python操作excel主要用到xlrd和xlwt这两个库,即xlrd是读excel,xlwt是写excel的... 阅读全文
posted @ 2018-04-12 15:38 子彦 阅读(1608) 评论(0) 推荐(0) 编辑
摘要: 作者:半载流殇链接:https://zhuanlan.zhihu.com/p/35219750来源:知乎著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。 Pythonic,简言之就是以Python这门语言独特的方式写出既简洁又优美的代码!笔者精心整理了许多实用的Python tr 阅读全文
posted @ 2018-04-03 16:04 子彦 阅读(467) 评论(0) 推荐(0) 编辑
摘要: 页级:引擎 BDB。表级:引擎 MyISAM , 理解为锁住整个表,可以同时读,写不行行级:引擎 INNODB , 单独的一行记录加锁 表级,直接锁定整张表,在你锁定期间,其它进程无法对该表进行写操作。如果你是写锁,则其它进程则读也不允许行级,,仅对指定的记录进行加锁,这样其它进程还是可以对同一个表 阅读全文
posted @ 2018-02-01 11:09 子彦 阅读(915) 评论(0) 推荐(0) 编辑