2018年12月11日

如何计算数据集均值和方差

摘要： import os from PIL import Image import matplotlib.pyplot as plt import numpy as np from scipy.misc import imread filepath = '/home/JPEGImages' # 数据集目录 pathDir = os.listdir(filepath) R_channe... 阅读全文

posted @ 2018-12-11 18:44 那抹阳光1994 阅读(4816) 评论(0) 推荐(0)

数据归一化（标准化）

摘要： 数据归一化 数据预处理中，标准的第一步是数据归一化。虽然这里有一系列可行的方法，但是这一步通常是根据数据的具体情况而明确选择的。特征归一化常用的方法包含如下几种： min-max标准化 逐样本均值消减(也称为移除直流分量) Z-score 标准化(使数据集中所有特征都具有零均值和单位方差) Z-sc 阅读全文

posted @ 2018-12-11 17:25 那抹阳光1994 阅读(1105) 评论(0) 推荐(0)

python concurrent.futures 实现并行计算

摘要： python因为其全局解释器锁GIL而无法通过线程实现真正的并行计算。这个论断我们不展开，但是有个概念我们要说明，IO密集型 vs. 计算密集型。 IO密集型：读取文件，读取网络套接字频繁。 计算密集型：大量消耗CPU的数学与逻辑运算，也就是我们这里说的并行计算。 而concurrent.futur 阅读全文

posted @ 2018-12-11 15:26 那抹阳光1994 阅读(733) 评论(0) 推荐(0)

python全局解释器锁（GIL）

摘要： 什么是全局解释器锁GIL 首先需要明确的一点是GIL并不是Python的特性，它是在实现Python解析器(CPython)时所引入的一个概念。就好比C++是一套语言（语法）标准，但是可以用不同的编译器来编译成可执行代码。有名的编译器例如GCC，INTEL C++，Visual C++等。Pytho 阅读全文

posted @ 2018-12-11 11:22 那抹阳光1994 阅读(558) 评论(0) 推荐(0)

残差的正态性检验——概率图和QQ-plot图

摘要： 数据的正态性检验 检查数据是否满足正态分布，一个很直观的方法是考察数据的正态概率图和QQ图。在MATLAB中可以很容易实现。 正态概率图（normal probability plot） 用于检查一组数据是否服从正态分布。是实数与正态分布数据之间函数关系的散点图。如果这组实数服从正态分布，正态概率图 阅读全文

posted @ 2018-12-11 09:55 那抹阳光1994 阅读(40670) 评论(0) 推荐(2)

导航