04 2020 档案

数据仓库的四个层次设计
摘要：1、数据仓库的四个层次设计 2、https://www.jianshu.com/p/4348adfc1d98 https://blog.csdn.net/m0_37125796/article/details/90770643 https://blog.csdn.net/nyotengu/artic 阅读全文
posted @ 2020-04-20 15:35 抽象Java 阅读(797) 评论(0) 推荐(0)
数据仓库ODS、DW和DM概念区分
摘要：数据仓库ODS、DW和DM概念区分:https://blog.csdn.net/zhu592665411/article/details/80836770 阅读全文
posted @ 2020-04-16 22:50 抽象Java 阅读(457) 评论(0) 推荐(0)
HashMap原理
摘要：HashMap原理 https://blog.csdn.net/suifeng629/article/details/82179996 阅读全文
posted @ 2020-04-15 14:32 抽象Java 阅读(113) 评论(0) 推荐(0)
Hive---CommonJoin和MapJoin区别
摘要：CommonJoin和MapJoin区别 CommonJoin即传统思路实现Join，性能较差 因为涉及到了shuffle的过程 Common join/shuffle join/reduce join (都是指同一个) MapJoin 也叫作 boardcast join，但是MapJoin不会有 阅读全文
posted @ 2020-04-15 13:19 抽象Java 阅读(753) 评论(0) 推荐(0)
spark-repartition作用
摘要：spark-repartition 问题描述：streaming 消费多个topic，但是不同topic的每个分区的数据量差距很大，一个数量级以上。导致每个task消费的数据量不一样，造成严重的数据倾斜。所以需要进行一次repartition使得处理起来比较均匀。 [ 转自 ： https://ww 阅读全文
posted @ 2020-04-14 14:05 抽象Java 阅读(1295) 评论(0) 推荐(0)
Java概念No7——线程同步锁
摘要：线程同步锁 ：https://www.cnblogs.com/nanyangke-cjz/p/7055759.html 静态锁 和 非静态锁（实例锁）的区别：https://www.jianshu.com/p/70573cbb3d19 阅读全文
posted @ 2020-04-13 00:03 抽象Java 阅读(119) 评论(0) 推荐(0)
Synchronize 四种用法
摘要：Sync 四种用法 https://www.cnblogs.com/lukelook/p/9946065.html Sync 静态和非静态用法 https://blog.csdn.net/wangwang00001/article/details/80100716 阅读全文
posted @ 2020-04-12 23:37 抽象Java 阅读(401) 评论(0) 推荐(0)
JAVA概念No6——面向对象的三个基本特征
摘要：面向对象的三个基本特征 https://blog.csdn.net/baidu_33714003/article/details/52290627 多态实例： 转自： https://www.cnblogs.com/1693977889zz/p/8296595.html https://www.cn 阅读全文
posted @ 2020-04-12 22:56 抽象Java 阅读(126) 评论(0) 推荐(0)
Java集合中List,Set以及Map的所有子类及实现等集合体系
摘要：Java集合中List,Set以及Map的所有子类及实现等集合体系 （转自：https://blog.csdn.net/qq_42217363/article/details/99582926） 区别 阅读全文
posted @ 2020-04-12 20:32 抽象Java 阅读(309) 评论(0) 推荐(0)
b 和 b+ 树
摘要：https://www.cnblogs.com/xueqiuqiu/articles/8779029.html 阅读全文
posted @ 2020-04-12 13:37 抽象Java 阅读(105) 评论(0) 推荐(0)
JVM
摘要：JVM https://www.cnblogs.com/hexinwei1/p/9406239.html 阅读全文
posted @ 2020-04-11 23:20 抽象Java 阅读(112) 评论(0) 推荐(0)
OLAP
摘要：OLAP 联机分析处理OLAP（On-Line Analytical Processing); OLAP是数据仓库系统的主要应用，支持复杂的分析操作，侧重决策支持，并且提供直观易懂的查询结果。通俗的讲，就是对数据按不同维度的聚合，维度的上钻，下卷等。【1】 OLTP 联机事务处理OLTP（on-li 阅读全文
posted @ 2020-04-11 09:50 抽象Java 阅读(267) 评论(0) 推荐(0)
HIVE 查询返回 NULL
摘要：创建表格 hive> CREATE TABLE student(id INT, name STRING) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t'; 导入数据 load data local inpath '/home/testData/dataT 阅读全文
posted @ 2020-04-10 14:00 抽象Java 阅读(386) 评论(0) 推荐(0)
阿里云实时数据仓
摘要：需求分析 阿里云技术框架 技术选型 系统架构 业务流程 数据表结构 ODS (操作性数据) 到 DWD (data warehouse detail) 层的业务流程 DWD 到 ADS 阅读全文
posted @ 2020-04-09 22:05 抽象Java 阅读(246) 评论(0) 推荐(0)
阿里云离线数据仓项目
摘要：技术选型 阅读全文
posted @ 2020-04-08 20:36 抽象Java 阅读(472) 评论(0) 推荐(0)
数据仓库工具箱-事实表类型
摘要：事实表类型 阅读全文
posted @ 2020-04-06 21:54 抽象Java 阅读(389) 评论(0) 推荐(0)
rowkey 不同场景设计
摘要：https://www.iteblog.com/archives/2486.html#_Rowkey 解决热点问题 https://cloud.tencent.com/developer/article/1080103 https://www.cnblogs.com/bdifn/p/3801737. 阅读全文
posted @ 2020-04-05 12:18 抽象Java 阅读(168) 评论(0) 推荐(0)