摘要：一、Clickhouse的物化视图 今天来简单介绍一下clickhouse的物化视图 物化视图与普通视图的区别： 普通视图不保存数据，保存的仅仅是查询语句，查询的时候还是从原表读取数据，可以将普通视图理解为是个子查询，物化视图则是把查询的结果根据相应的引擎存入到了磁盘或内存中，对数据重新进行了组织， 阅读全文

摘要：一、到底在哪些地方需要使用序列化技术呢？ 二、Zookeeper（分布式协调服务组件+存储系统） Java 序列化机制 Hadoop序列化机制 Zookeeper序列化机制 一、到底在哪些地方需要使用序列化技术呢？ 1、当在网络中需要进行消息、数据、等的传输，那么这些数据就需要进行序列化和反序列化。 阅读全文

摘要：yarn的工作执行流程图 1、用户向YARN中提交应用程序 2、ResourceManager为该应用程序找到一个可用的NodeManager 并分配一个Container，然后在这个Container中启动应用程序的ApplicationMaster。 3、ApplicationMaster向Re 阅读全文

摘要：1、WAL意为 Write Ahead Log ，类似MySQL中的binlog，用来做灾难恢复之用，HLog记录数据的所有变更，一旦数据修改，就可以从Log中进行恢复。 Hbase采用类LSM的架构体系，数据写入并没有直接写入文件，而是会先写入缓存（Memstore），在满足一定条件下缓存缓存数据 阅读全文