三叶草body

摘要： redis基本技术总结 1 redis 简介 基于内存、分布式、可选持久性的键值对(Key-Value)存储数据库 redis是一个高性能的key-value存储系统。它支持存储的value类型相对更多，包括string(字符串)、list(链表)、set(集合)、zset(sortedset--有 阅读全文

摘要： MySQL中的主从复制 条件 主库开启binlog日志（设置log-bin参数） 主从server-id不同（这个要小心） 从库服务器能连通主库 原理 从库生成两个线程，一个I/O线程，一个SQL线程； I/O线程去请求主库的binlog，并将得到的binlog日志写到relay log（中继日志） 阅读全文

摘要： 1 k-prototypes聚类 https://github.com/nicodv/kmodes.git 1 k-prototypes算法 K-prototype是K-means与K-modes的一种集合形式，适用于数值类型与字符类型集合的混合型数据。 k-prototypes算法在聚类的过程中， 阅读全文

摘要： 1 特征预处理API sklearn.preprocessing 1.1 归一化 定义： 通过对原始数据进行变换把数据映射到(默认为[0,1])之间 公式： mx : 指定范围的最大值 mi: 指定范围的最小值 API sklearn.preprocessing.MinMaxScaler (feat 阅读全文

摘要： 单元测试框架 1 unittest框架 unittest的设计灵感最初来源于Junit以及其他语言中具有共同特征的单元框架。它支持自动化测试，在测试中使用setup（初始化）和shutdown（关闭销毁）操作，组织测试用例为套件（批量运行），以及把测试和报告独立开来。 为了实现这些，unittest 阅读全文

摘要： import matplotlib.pyplot as plt # import matplotlib import rcParams # 设置显示中文字体 plt.rcParams["font.sans-serif"] = ["SimHei"] # 设置正常显示符号 plt.rcParams["a 阅读全文

摘要： 1 opencv简介 1.1 数字图像的表示 1.1.1 位数 计算机采用0/1编码的系统，数字图像也是利用0/1来记录信息，我们平常接触的图像都是8位数图像，包含0～255灰度，其中0代表最黑，1表示最白 人眼对灰度更敏感一些，在16位到32位之间。 1.1.2 图像的分类 二值图像 ​ 一幅二值 阅读全文

摘要： loguru日志方案 日志相关内容： 目志输出渠道： 文件，控制台输出 日志级别： DEBUG < INFO < WARNING < ERROR < CRITICAL 日志内容： 年月日、时分秒、级别、哪行代码报错、具休报错 日的注意事项： 日志文件不能太大：切割日志，按照指定大小200kb，按照指 阅读全文

摘要： Queue（队列对象） Queue是python中的标准库，可以直接import Queue引用;队列是线程间最常用的交换数据的形式 python下多线程的思考 对于资源，加锁是个重要的环节。因为python原生的list,dict等，都是not thread safe的。而Queue，是线程安全的 阅读全文

摘要： 1 Scrapy 和 scrapy-redis的区别 Scrapy 是一个通用的爬虫框架，但是不支持分布式，Scrapy-redis是为了更方便地实现Scrapy分布式爬取，而提供了一些以redis为基础的组件(仅有组件)。 pip install scrapy-redis Scrapy-redis 阅读全文