HuZihu

摘要： 最近在看爬虫方面的知识，看到崔庆才所著的《Python3网络爬虫开发实战》一书讲的比较系统，果断入手学习。下面根据书中的内容，简单总结一下爬虫的基础知识，并且实际练习一下。详细内容请见：https://cuiqingcai.com/5465.html（作者已把书的前几章内容对外公开）。 在写爬虫程序 阅读全文

摘要： Pearson's r，称为皮尔逊相关系数（Pearson correlation coefficient），用来反映两个随机变量之间的线性相关程度。 用于总体（population）时记作ρ (rho)（population correlation coefficient）： 给定两个随机变量X, 阅读全文

摘要： 统计学上用方差和标准差来度量数据的离散程度 ，但是方差和标准差是用来描述一维数据的（或者说是多维数据的一个维度），现实生活中我们常常会碰到多维数据，因此人们发明了协方差（covariance），用来度量两个随机变量之间的关系。 我们仿照方差的公式来定义协方差：（这里指样本方差和样本协方差） 方差： 阅读全文

摘要： 《Python for Data Analysis》一书由Wes Mckinney所著，中文译名是《利用Python进行数据分析》。这里记录一下学习过程，其中有些方法和书中不同，是按自己比较熟悉的方式实现的。 第四个实例：USDA Food Database 简介：美国农业部（USDA）制作了一份有 阅读全文

摘要： 线性回归是机器学习中最基础的算法，掌握了线性回归算法，有利于以后更容易地理解其它复杂的算法。 线性回归看似简单，但是其中包含了线性代数，微积分，概率等诸多方面的知识。让我们先从最简单的形式开始。 一元线性回归（Simple Linear Regression）： 假设只有一个自变量x（indepen 阅读全文

摘要： 《Python for Data Analysis》一书由Wes Mckinney所著，中文译名是《利用Python进行数据分析》。这里记录一下学习过程，其中有些方法和书中不同，是按自己比较熟悉的方式实现的。 第三个实例：US Baby Names 1880-2010 简介： 美国社会保障总署（SS 阅读全文

摘要： 《Python for Data Analysis》一书由Wes Mckinney所著，中文译名是《利用Python进行数据分析》。这里记录一下学习过程，其中有些方法和书中不同，是按自己比较熟悉的方式实现的。 第二个实例：MovieLens 1M Data Set 简介： GroupLens Res 阅读全文

摘要： 《Python for Data Analysis》一书由Wes Mckinney所著，中文译名是《利用Python进行数据分析》。这里记录一下学习过程，其中有些方法和书中不同，是按自己比较熟悉的方式实现的。 第一个实例：1.usa.gov data from bit.ly 简介：2011年，URL 阅读全文

摘要： 分布 散点图：最大的作用是查看两个或多个变量的分布情况，可以查看数据之间的相关性（正相关，负相关），和拟合的回归线一起可以做残差分析 另一个常用的场景就是利用数据的分布，迅速找到规律和切分点（看是否有分簇） 变种：气泡图/四象限图 直方图：用来表示连续型数据分布情况 箱线图：用来显示数据的离散情况， 阅读全文

摘要： 三门问题（Monty Hall problem）也称为蒙提霍尔问题或蒙提霍尔悖论，出自美国的电视游戏节目《Let’s Make a Deal》。问题名字来自该节目的主持人蒙提·霍尔（Monty Hall）。 这个游戏的玩法是：参赛者会看见三扇关闭的门，其中一扇门后面有一辆汽车，选中后面有车的那扇门就 阅读全文