05 2021 档案

摘要:Linux Shell管道详解 我们已经知道了怎样从文件重定向输入,以及重定向输出到文件。Shell 还有一种功能,就是可以将两个或者多个命令(程序或者进程)连接到一起,把一个命令的输出作为下一个命令的输入,以这种方式连接的两个或者多个命令就形成了管道(pipe)。 Linux 管道使用竖线 | 连 阅读全文
posted @ 2021-05-31 22:40 温家三哥 阅读(5094) 评论(0) 推荐(1)
摘要:Linux Shell 重定向分为两种,一种输入重定向,一种是输出重定向;从字面上理解,输入输出重定向就是「改变输入与输出的方向」的意思。 那么,什么是输入输出方向呢?标准的输入输出方向又是什么呢? 一般情况下,我们都是从键盘读取用户输入的数据,然后再把数据拿到程序(C语言程序、Shell 脚本程序 阅读全文
posted @ 2021-05-31 19:19 温家三哥 阅读(1591) 评论(0) 推荐(0)
摘要:1、普通用户有创建文件或目录的权限呢? 对于普通用户没有直接创建或目录的权限,需要通过root修改 。如图所示: (1)切换至test用户操作; (2)创建test_file目录。由于没有权限,无法创建成功; (3)切换到root后,通过chown赋予test权限。接着重复(1)(2)步骤即可实现创 阅读全文
posted @ 2021-05-31 16:38 温家三哥 阅读(13421) 评论(0) 推荐(1)
摘要:链接:https://pan.baidu.com/s/1hstPPiO 密码:ik7y 阅读全文
posted @ 2021-05-30 22:32 温家三哥 阅读(606) 评论(0) 推荐(0)
摘要:本篇文章主要介绍了VMware安装Centos7超详细过程(图文),具有一定的参考价值,感兴趣的小伙伴们可以参考一下 1.软硬件准备 软件:推荐使用VMware 镜像:CentOS7 ,如果没有镜像可以在官网下载 :http://isoredirect.centos.org/centos/7/iso 阅读全文
posted @ 2021-05-30 18:51 温家三哥 阅读(254) 评论(0) 推荐(0)
摘要:写在源文件中的源代码是人类可读的源。它需要"编译",转为机器语言,这样 CPU 可以按给定指令执行程序。C 语言编译器用于把源代码编译成最终的可执行程序。这里假设您已经对编程语言编译器有基本的了解了。 (一).安装 1.为了在 Windows 上安装 GCC,需要到MinGW 的主页 ,进入 Min 阅读全文
posted @ 2021-05-29 18:19 温家三哥 阅读(3347) 评论(0) 推荐(0)
摘要:前言 Flink 是流式的、实时的 计算引擎 上面一句话就有两个概念,一个是流式,一个是实时。 流式:就是数据源源不断的流进来,也就是数据没有边界,但是我们计算的时候必须在一个有边界的范围内进行,所以这里面就有一个问题,边界怎么确定? 无非就两种方式,根据时间段或者数据量进行确定,根据时间段就是每隔 阅读全文
posted @ 2021-05-28 16:49 温家三哥 阅读(368) 评论(0) 推荐(0)
摘要:Flink可靠性的基石-checkpoint机制详细解析 Checkpoint介绍 checkpoint机制是Flink可靠性的基石,可以保证Flink集群在某个算子因为某些原因(如 异常退出)出现故障时,能够将整个应用流图的状态恢复到故障之前的某一状态,保 证应用流图状态的一致性。Flink的ch 阅读全文
posted @ 2021-05-28 16:06 温家三哥 阅读(724) 评论(0) 推荐(0)
摘要:理论 HIVE提供了EXPLAIN命令来展示一个查询的执行计划,这个执行计划对于我们了解底层原理,hive 调优,排查数据倾斜等很有帮助 使用语法如下: EXPLAIN [EXTENDED|CBO|AST|DEPENDENCY|AUTHORIZATION|LOCKS|VECTORIZATION|AN 阅读全文
posted @ 2021-05-28 15:51 温家三哥 阅读(906) 评论(0) 推荐(0)
摘要:hive语句执行顺序 msyql语句执行顺序 代码写的顺序: select ... from... where.... group by... having... order by.. 或者 from ... select ... 代码的执行顺序: from... where...group by. 阅读全文
posted @ 2021-05-28 15:30 温家三哥 阅读(687) 评论(0) 推荐(0)
摘要:hive执行计划解析 Hive wiki - LanguageManual Explain 1.hive执行流程的重要性 1)当sql任务非常慢时,就需要分析它的执行流程2)常见的面试中,问对hive的理解?回答只是写sql,这个是很片面的。要从表面的sql,在脑海中映射出MR流程,在哪儿进行map 阅读全文
posted @ 2021-05-28 14:44 温家三哥 阅读(1795) 评论(0) 推荐(0)
摘要:mysql向hsql迁移的一些经验 1. HSQL不支持BLOB,所以使用LONGVARBINARY来代替BLOB, 用VARBINARY来代替mediumblob; 2. HSQL不支持TEXT / MEDIUMTEXT, 使用LONGVARCHAR来代替; 3. TINYINT, INT, BI 阅读全文
posted @ 2021-05-16 21:31 温家三哥 阅读(148) 评论(0) 推荐(0)
摘要:获取当前时间 返回当前日期 :select curdate() ;2018-05-21 返回当前时间 :select curtime() ;16:24:03 返回当前日期和时间:select now() ;2018-05-21 16:24:03 返回当前日期和时间:select now() + 0 阅读全文
posted @ 2021-05-16 21:29 温家三哥 阅读(1132) 评论(0) 推荐(0)
摘要:一、MySQL 获得当前日期时间 函数1.1 获得当前日期+时间(date + time)函数:now()mysql> select now();+ +| now() |+ +| 2008-08-08 22:20:46 |+ +除了 now() 函数能获得当前的日期时间外,MySQL 中还有下面的函 阅读全文
posted @ 2021-05-16 21:15 温家三哥 阅读(2118) 评论(0) 推荐(0)
摘要:1)date_format函数(根据格式整理日期) 作用:把一个字符串日期格式化为指定的格式。 select date_format('2017-01-01','yyyy-MM-dd HH:mm:ss'); --日期字符串必须满足yyyy-MM-dd格式 结果:2017-01-01 00:00:00 阅读全文
posted @ 2021-05-16 21:12 温家三哥 阅读(1635) 评论(0) 推荐(0)
摘要:概述 ETL(Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程),对于企业或行业应用来说,我们经常会遇到各种数据的处理,转换,迁移,所以了解并掌握一种etl工具的使用,必不可少。最近用kettle做数据处理比较多,所以也就介绍下这方面内容,这里先对比下几款主流的ETL 阅读全文
posted @ 2021-05-15 21:29 温家三哥 阅读(6349) 评论(0) 推荐(0)
摘要:一、概述 在多维分析的商业智能解决方案中,根据事实表和维度表的关系,又可将常见的模型分为星型模型和雪花型模型。在设计逻辑型数据的模型的时候,就应考虑数据是按照星型模型还是雪花型模型进行组织。 当所有维表都直接连接到“ 事实表”上时,整个图解就像星星一样,故将该模型称为星型模型,如图 1 。 星型架构 阅读全文
posted @ 2021-05-15 21:02 温家三哥 阅读(9399) 评论(0) 推荐(0)
摘要:分析方法 - RFM 一、简介 RFM模型是衡量客户价值和客户创利能力的重要工具和手段。在众多的客户关系管理(CRM)的分析模式中,RFM模型是被广泛提到的。该机械模型通过一个客户的近期购买行为、购买的总体频率以及花了多少钱3项指标来描述该客户的价值状况。 根据美国数据库营销研究所Arthur Hu 阅读全文
posted @ 2021-05-07 17:14 温家三哥 阅读(1316) 评论(0) 推荐(0)