大墨垂杨

摘要： ==过滤器执行流程== reset() : reset the filter state before filtering a new row. filterAllRemaining(): true means row scan is over; false means keep going. fi 阅读全文

摘要： 可以通过在storm.yaml中增加如下样例的配置， 启动JMX来监控storm的各个角色。 其中对于Worker的监控，因为一个节点上可以有多个work，为了防止端口号重复导致启动失败，所以用动态代替。 %ID%为每个work的占用端口号，例如worker端口为6704，则监视端口为16704。 阅读全文

摘要： 使用JConsole或者VisualVM等工具监控HBase状态时，需要修改HBase的配置文件，以解决随机端口问题。 文件名：hbase-env.sh 这几个配置，默认是关闭的，放开就可以。 阅读全文

摘要： ==版本== mongodb-linux-x86_64-rhel70-3.4.17.tgz ==准备== 3个节点，我这里的IP及hostname分别是： 同时节点需要完成： 1、关闭防火墙 2、SSH互信 ==节点规划== dscn49：PRIMARY dscn50：SECONDARY dscn5 阅读全文

摘要： ==版本信息== HBase：2.7.1 Storm：1.0.1 RocketMQ：3.4.6（阿里版） ==问题描述== 2018年9月3号晚上23点左右，例行巡检系统运行状况时， 发现Storm消费RocketMQ入HBase的过程中，RocketMQ的TPS极低，甚至为0了。 （Storm从R 阅读全文

摘要： RocketMQ版本：3.4.6 ==问题现象== RocketMQ集群的某个topic，在一部分节点上消费有“断层”，这部分数据一致没办法消费。 ==调查过程== 一顿操作猛如虎的调查之后发现， 该Topic的消费者的客户端连接数不正确。 程序中设置的客户端数明明是4个， 但是Web页面上显示的是 阅读全文

摘要： 1、版本信息： Hadoop版本：2.7.1 HBase版本：1.2.1 MongDB版本：3.4.14 2、HBase表名及数据： 3、Maven依赖： 4、MapReduce程序： 5、运行结果： 6、程序源码： https://github.com/quchunhui/tod-train-1. 阅读全文

摘要： 问题 有同事提出各个问题：如何修改RocketMQ的NameServer端口号？（默认：9876） 结论 调查并验证之后，结论及过程如下： 验证版本：rocketmq-all-4.2.0 NameServer启动的时候会根据【业务参数】及【网络参数】来指定NameServer的启动选项： NameS 阅读全文

摘要： HBase版本：1.3.1 Hadoop版本：2.7.1 Zookeeper版本：3.4.6 检查线上业务系统的磁盘空间， 发现HDFS的oldWALs日志占用了大量的空间。 我们的集群分为两套，前置一套，后置一套， 其中，利用hbase的replication功能能，由前置向后置集群同步数据。 经 阅读全文

摘要： 删除了Linux下的一个文件，但是系统空间并没有被释放。 如下：/home/hadmin/data/hadoop 使用了1.3T的空间，但是实际只使用了600多G 原因是我删除了一个600多G的文件，但是这个文件由于正在使用，所以Linux没有释放其空间。 1、首先获得一个已经被删除可是仍然被应用程 阅读全文