08 2020 档案

摘要:这篇没什么顺序,就是单纯的罗列一下常见的问题和可能遇到的问题,问题之间没有关联,后续有新的问题再补充 1. Kafka消息积压,消费能力不足怎么办: 1. 如果是消费能力不足的话,可以提高对应Topic的分区数,同时提升消费者组(Consumer Group)内消费者的数量,要注意分区数等于消费者组 阅读全文
posted @ 2020-08-07 10:49 wen1995 阅读(832) 评论(0) 推荐(0)
摘要:HBase2.2.4是截止2020-08-03官方最新的Stable版本,因为做了snappy压缩,但是还未升级到生产环境,需要在测试环境先测试压缩效果的同时也需要测试读写性能 YCSB-0.17.0压测HBase,这个工具不多介绍了,雅虎开源的专门压测NoSQL数据库的 ycsb-0.17.0下载 阅读全文
posted @ 2020-08-03 23:26 wen1995 阅读(918) 评论(0) 推荐(0)
摘要:HBase支持snappy的前提是hadoop支持snappy,所以需要先从底层,从hadoop开始添加snappy 同时,snappy设置完成为了保险起见可以进行压测,看看集群的效果,存储压缩效果和性能测试,性能测试报告点击这里 安装Snappy本地库: 下载snappy: hadoop@hado 阅读全文
posted @ 2020-08-03 01:08 wen1995 阅读(1767) 评论(0) 推荐(0)