2018年12月4日

摘要: 很长一段时间以来,一个region同一时间只能在一台RS(Region Server)中打开。如果一个region同时在多个RS上打开,就是multi-assign问题,会导致数据不一致甚至丢数据的情况,这是要避免和解决的。对于正常情况而言,region本质上是单点服务的,当RS宕机时,这个RS上的 阅读全文
posted @ 2018-12-04 18:03 深圳私塾 阅读(311) 评论(0) 推荐(0)
摘要: Spark架构 Spark架构采用了分布式计算中的Master-Slave模型。集群中运行Master进程的节点称为Master,同样,集群中含有Worker进程的节点为Slave。Master负责控制整个集群的运行;Worker节点相当于分布式系统中的计算节点,它接收Master节点指令并返回计算 阅读全文
posted @ 2018-12-04 15:12 深圳私塾 阅读(184) 评论(0) 推荐(0)

导航