摘要：前言 RegionServer维护Master分配给它的region，处理对这些region的IO请求,负责切分在运行过程中变得过大的region, 由于集群性能（ 分配的内存和磁盘是有限的 ）有限的，那么HBase单个RegionServer的region数目肯定是有上限的。Region数... 阅读全文

摘要：前言 在使用cdh集群过程中，难免会因为某些不可抗拒的原因导致节点IP或hostName变动，而cm的监控界面无法完成这些事情，但是cm将集群中所有的主机的信息都存在postgresql数据库的hosts表中， 现在让我们来通过修改hosts来完成这个操作。第一步，关闭服务1. 关闭集群服务，及 ... 阅读全文

摘要：前言 其实cloudera已经做了这个事了，只是把kafka的包和cdh的parcel包分离了，只要我们把分离开的kafka的服务描述jar包和服务parcel包下载了，就可以实现完美集成了。具体实现的简要步骤可参照cloudera官网提供的文档：http://www.cloudera.com... 阅读全文

摘要：最近在一个项目中做数据的分类存储，在spark中使用groupByKey后存入HBase，发现数据出现双份（ 所有记录的 rowKey 是随机 唯一的 ） 。经过不断的测试，发现是spark的运行参数配置的问题：spark.speculation=true， 将其改为false，问题就解决了。哎... 阅读全文