码出个世界

导航

上一页 1 2 3 4 5 6 ··· 12 下一页

2022年7月29日 #

win10关闭防火墙

摘要: 1.右击此电脑,点属性 2.点击主页 3.搜索控制面板 4.点击系统和安全 5.单击 6.get!! 阅读全文

posted @ 2022-07-29 19:18 码出个世界 阅读(1020) 评论(0) 推荐(0) 编辑

主机 宿主机 虚拟机

摘要: 主机:包括机箱、主板、CPU、内存、硬盘、显卡等,总之就是机箱及和内部的所有东西的总称。 宿主机:指要安装虚拟机软件的计算机,你花钱买的物理机。 虚拟机:利用虚拟机工具构造出来的,有一整套硬件设备,有自己操作系统,应用软件。 阅读全文

posted @ 2022-07-29 18:25 码出个世界 阅读(288) 评论(0) 推荐(0) 编辑

row format delimited fields terminated by ','

摘要: 以','结尾的行格式分隔字段 阅读全文

posted @ 2022-07-29 18:25 码出个世界 阅读(62) 评论(0) 推荐(0) 编辑

hive base64 加密解密函数

摘要: 加密select base64(cast('abcd' as binary))YWJjZA==解密select unbase64('YWJjZA==')abcd 阅读全文

posted @ 2022-07-29 14:14 码出个世界 阅读(2544) 评论(0) 推荐(0) 编辑

2022年7月26日 #

hive简单加密

摘要: select '66666666' t,encode('66666666' ,'UTF-8') t1 -- 存储hadoop字段类型binary,base64(cast('66666666' as binary)) t2 -- 存储hadoop字段类型string,md5('66666666') t 阅读全文

posted @ 2022-07-26 11:40 码出个世界 阅读(367) 评论(0) 推荐(0) 编辑

HDFS读数据流程

摘要: (1)客户端通过 DistributedFileSystem 向 NameNode 请求下载文件,NameNode 通过查 询元数据,找到文件块所在的 DataNode 地址。 (2)挑选一台 DataNode(就近原则,然后随机)服务器,请求读取数据。 (3)DataNode 开始传输数据给客户端 阅读全文

posted @ 2022-07-26 09:40 码出个世界 阅读(106) 评论(0) 推荐(0) 编辑

2022年7月25日 #

浅谈数据仓库分层

摘要: 1.什么是“层”? 数据仓库的核心功能是存储数据,所以层就是指一批相似特征表的集合。 2.层包含的内容 DB对象:表、视图、触发器、存储过程、序列等等,设计时会为同层对象规划独立的路径(例如,Hive的库、Oracle的Schema等); ETL:封装好的一组sql代码或者ETL工具的作业(作业也是 阅读全文

posted @ 2022-07-25 20:01 码出个世界 阅读(756) 评论(0) 推荐(0) 编辑

hive-模糊匹配like的用法

摘要: 查询带有某个字词字段的全部信息 select * from bishow.MKT_DTL_Q_PROCESS_INFO_SUB_DAY where title like concat('%','密码','%') select count(*) from bishow.MKT_DTL_Q_PROCES 阅读全文

posted @ 2022-07-25 16:36 码出个世界 阅读(603) 评论(0) 推荐(0) 编辑

2022年7月22日 #

数据仓库分层

摘要: 分层原因: 把复杂问题简单化,每一层只处理简单的任务,方便定位问题; 减少重复开发,规范数据分层,通过中间层数据能够减少重复计算,且增加计算结果的复用性; 隔离原始数据,不论是数据的异常还是数据的敏感性,使真实数据与统计数据解耦开。 ods(原始数据层):数据准备区,也称为贴源层。数据仓库源头系统的 阅读全文

posted @ 2022-07-22 15:00 码出个世界 阅读(153) 评论(0) 推荐(0) 编辑

数仓取数流程

摘要: 流程:excel表转换为csv、txt文件 > csv、txt文件导入虚拟机(hue直接添加导入) > 解决txt文件导入hive库乱码 > 写sql语句,两表进行关联 >文件导入,以excel格式 excel表转换为csv、txt文件: 直接转成txt文件更方便 excel转csv文件,在exce 阅读全文

posted @ 2022-07-22 13:03 码出个世界 阅读(268) 评论(0) 推荐(0) 编辑

上一页 1 2 3 4 5 6 ··· 12 下一页