随笔分类 - 技术组件
摘要:记一次生产KAFKA记录 清理策略的调整* 在网上查了好多资料,都说kafak默认清理是7天,但实际生产环境数据一直在堆积,没有清理。 然后在本地搭建了kafka集群,各种配置策略全部尝试了一下,最终确定要达到清理效果,如下几个配置必须有: ##保留时间 log.retention.hours=72
阅读全文
摘要:KAFKA 的TOPIC __consumer_offsets 的清理 生产环境因kafka日志数据量过大,导致磁盘空间占用满了,通过查看发现kafka的日志储存目录kafkadata占用90%的存储。 再进一步查找,发现目录下好多__consumer_offsets 生成的储存文件,每个文件1GB
阅读全文
摘要:一、环境准备 1、系统环境: 主机 IP 节点-角色-实例(端口) db01 10.0.7.68 M1-master-6379、S1-slave-6382 db02 10.0.7.69 M2-master-6380、S2-slave-6383 db03 10.0.7.70 M3-master-638
阅读全文
摘要:Spring + redis集群的集成 JAR需求 spring-data-redis-1.8.1.RELEASE.jar jedis-2.9.0.jar spring-data-commons-1.8.1.RELEASE.jar commons-pool2-2.4.2.jar 使用spring
阅读全文

浙公网安备 33010602011771号