摘要：
* 配置管理组件 * * 1、配置管理组件可以复杂，也可以很简单，对于简单的配置管理组件来说，只要开发一个类，可以在第一次访问它的 * 时候，就从对应的properties文件中，读取配置项，并提供外界获取某个配置key对应的value的方法 * 2、如果是特别复杂的配置管理组件，那么可能需要使用一 阅读全文
posted @ 2021-12-29 21:32
Zhbeii
阅读(46)
评论(0)
推荐(0)
摘要：
Java中，每一个类第一次使用的时候，就会被Java虚拟机（JVM）中的类加载器，去从磁盘上的.class文件中加载出来，然后为每个类都会构建一个Class对象，就代表了这个类 每个类在第一次加载的时候，都会进行自身的初始化，那么类初始化的时候，会执行哪些操作的呢？ 就由每个类内部的static { 阅读全文
posted @ 2021-12-29 18:28
Zhbeii
阅读(50)
评论(0)
推荐(0)
摘要：
累加器用来把 Executor 端变量信息聚合到 Driver 端。在 Driver 程序中定义的变量，在Executor 端的每个 Task 都会得到这个变量的一份新的副本，每个 task 更新这些副本的值后，传回 Driver 端进行 merge。 从Accumulator中，获取数据，插入数据 阅读全文
posted @ 2021-12-29 16:30
Zhbeii
阅读(302)
评论(0)
推荐(0)
摘要：
RDD Cache缓存 RDD 通过 Cache 或者 Persist 方法将前面的计算结果缓存，默认情况下会把数据以缓存在 JVM 的堆内存中。但是并不是这两个方法被调用时立即缓存，而是触发后面的 action 算子时，该 RDD 将会被缓存在计算节点的内存中，并供后面重用 存储级别： 如果级别名 阅读全文
posted @ 2021-12-29 15:20
Zhbeii
阅读(139)
评论(0)
推荐(0)
浙公网安备 33010602011771号