shihongpin

摘要： 环境准备 模板虚拟机准备 1、安装模板虚拟机 IP地址192.168.10.100、主机名称hadoop100、内存4G、硬盘50G 下载安装VWare Workstation Pro 16，因为Win11与VMWare15不兼容，在15中打开虚拟机会蓝屏 Linux系统全部以CentOS-7.5- 阅读全文

摘要： IF语句 IF( expr1 , expr2 , expr3 ) expr1 的值为 TRUE，则返回值为 expr2 expr1 的值为FALSE，则返回值为 expr3 SELECT IF(TRUE,1+1,1+2); -> 2 SELECT IF(FALSE,1+1,1+2); -> 3 WI 阅读全文

摘要： 连续问题的本质 单调递增的等差数列 例如游戏连续签到7天可以获得奖品，连续出现3次的数字 求解方法 （1）确定什么属性连续出现三次，即哪一属性连续，哪一属性相等 （2）增加额外的等差递增列，然后进行作差分组 案例 查询至少连续出现3次的数字 Logs表： id num 1 1 2 1 3 1 4 2 阅读全文

摘要： 概述 Hadoop是什么 Hadoop是一个由Apache基金会所开发的分布式系统基础架构 分布式系统：多台服务器共同完成一个任务（例如多台计算机共同存储一份大数据） 主要解决：海量数据的存储和海量数据的分析计算问题 广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈 Hadoo 阅读全文

摘要： 大数据概念 大数据：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 按顺序给出数据存储单位：bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB 大数 阅读全文

摘要： 概念 将数据进行分组，每个分组即是一个窗口，这和使用聚合函数时的group by分组类似 窗口函数会逐行计算，其重点是计算当前行与窗口内其他成员之间的关系，例如：组内排序，累积分布等 判断一个函数是不是窗口函数只需要看其是否有over关键字即可 窗口函数和聚合函数的区别 聚合函数（例如：sum/av 阅读全文

摘要： 日期函数 函数 描述 NOW() 返回当前的日期和时间 CURDATE() 返回当前的日期 CURTIME() 返回当前的时间 DATE() 提取日期或日期/时间表达式的日期部分 EXTRACT() 返回日期/时间的单独部分 DATE_ADD() 向日期添加指定的时间间隔 DATE_SUB() 从日 阅读全文

摘要： LIKE操作符 用于在 WHERE 子句中搜索列中的指定模式，是进行模糊查询的关键字 通常与 % 和 _ 通配符一起使用 SELECT column1, column2, ... FROM table_name WHERE column_name LIKE pattern; 通配符 %：匹配任意字符 阅读全文

摘要： 聚合函数 1、AVG()函数 返回数值列的平均值 SELECT AVG(column_name) FROM table_name 2、COUNT()函数 返回匹配指定条件的行数 （1）返回指定列的值的数目（NULL不计入） SELECT COUNT(column_name) FROM table_n 阅读全文

摘要： MySQL书写规则 SQL关键字不区分大小写 某些数据库系统要求每个SQL语句的末尾都有一个分号，分号是分隔数据库中每个 SQL 语句的标准方法 SQL要求在文本值周围加上单引号，数字字段不应用引号括起来 SELECT语句 用于从数据库中选择数据，返回的数据存储在结果表中，称为结果集 SELECT 阅读全文