摘要: 文章目录 数据表介绍1: 练习1:入门(简单) 数据表介绍2: 练习2:入门(基础) 入门(文本) 数据表介绍1: 用户信息表:user_profile其中device_id指终端编号(每个用户有唯一的一个终端),gender指性别,age指年龄,university指用户所在的学校,gpa是该用户 阅读全文
posted @ 2022-07-21 13:58 mariow 阅读(98) 评论(1) 推荐(0) 编辑
摘要: 《深入浅出统计学》pdf资源分享:提取码:g9dp 1. 信息图形化 o饼图:体现基本比例o条形图:更精确•垂直条形图:展现数值型数据,若类别名称不长,也可用于体现类别数据•水平条形图展现类别数据,尤其在类别名称太长的时候。若只有百分数而没有频数,或只有频数而没有百分数,需小心再隐藏基础数据真实情况 阅读全文
posted @ 2022-07-07 11:55 mariow 阅读(5584) 评论(0) 推荐(1) 编辑
摘要: 文章目录 一、数据分析方法论 1、数据分析方法论不同于数据分析发 2、数据分析方法论非常重要: 二、常用的数据分析方法论 1、PEST分析法 PEST的适用场景: 案例:某公司进行数字化/智能化战略规划 2、5W2H分析法 5W是指对于所有的现象都追问5个问题: 案例:用户网上购买行为分析 3、逻辑 阅读全文
posted @ 2022-07-02 17:38 mariow 阅读(512) 评论(0) 推荐(0) 编辑
摘要: 文章目录 确定职业方向: 偏业务方向的数据分析: 偏技术方向的数据分析: 了解数据分析流程 简单认识数据分析的作用与阶段 数据分析在企业的日常经营分析中主要有三大作用: 数据分析有六个阶段,分别为: 初步了解数据分析师该有的思路: 在分析数据时要时刻提出疑问: 要保证数据分析体系化 数据分析报告的撰 阅读全文
posted @ 2022-06-30 21:00 mariow 阅读(219) 评论(0) 推荐(0) 编辑
摘要: 文章目录 数据集描述 一、数据清洗 1.读取并查看数据基本信息和数据的完整性 2.查看数据集中行的重复情况并删除 3.处理缺失值 4.合并month和day列组成时间类型的date列 5.划分子数据集 二、数据分析 1.访问量与访客量的情况 2.不同用户行为的访问量情况 3.付费用户消费次数、付费率 阅读全文
posted @ 2022-05-25 14:52 mariow 阅读(388) 评论(0) 推荐(0) 编辑
摘要: 在将数据从hive存入mysql或者从hdfs存入mysql时出现了如下的错误: ERROR manager.CatalogQueryManager: Failed to list databasescom.mysql.jdbc.exceptions.jdbc4.CommunicationsExce 阅读全文
posted @ 2022-05-22 20:41 mariow 阅读(1014) 评论(1) 推荐(1) 编辑
摘要: 文章目录 1.缺失值 2.异常值 3.数据集成 4.实体识别 5.冗余属性识别 6.数据变换 数据清洗主要是删除原始数据集中的无关数据、重复数据,平滑噪声数据,筛选掉与挖掘主题无关的数据,处理缺失值、异常值等。 1.缺失值 处理缺失值的方法可分为3类:删除记录、数据插补和不处理。*缺失值的处理方法均 阅读全文
posted @ 2022-05-20 23:24 mariow 阅读(242) 评论(0) 推荐(0) 编辑
摘要: 文章目录 1.相关性分析 直接绘制散点图 计算相关系数 2.基本统计特征函数 1.相关性分析 分析连续变量之间线性相关程度的强弱,并用适当的统计指标表示出来的过程称为相关分析。 直接绘制散点图 判断两个变量是否具有线性相关关系的最直观的方法是直接绘制散点图绘制散点图矩阵需要同时考察多个变量间的相关关 阅读全文
posted @ 2022-05-20 23:14 mariow 阅读(416) 评论(0) 推荐(0) 编辑
摘要: 文章目录 前言 1.缺失值分析 2.异常值分析 3.一致性分析 前言 数据质量分析是数据挖掘中数据准备过程的重要一环,是数据预处理的前提,也是数据挖掘分析结论有效性和准确性的基础。数据质量分析的主要任务是检查原始数据中是否存在脏数据,脏数据一般是指不符合要求,以及不能直接进行相应分析的数据。在常见的 阅读全文
posted @ 2022-05-20 23:00 mariow 阅读(252) 评论(0) 推荐(0) 编辑
摘要: 文章目录 一、实验原理 二、实验内容 1、JUnit包下载配置 2、编写JUnit测试用例 三、编写测试代码 一、实验原理 JUnit是一个开源的Java编程语言的单元测试框架,最初由 Erich Gamma 和 Kent Beck 编写。Junit测试是一种白盒测试工具。JUnit是一套框架,继承 阅读全文
posted @ 2022-04-25 00:09 mariow 阅读(504) 评论(0) 推荐(0) 编辑