随笔分类 -  大数据相关

redis 集群主从对应关系查询与调整
摘要：查询脚本参考 GitHub - eyjian/redis-tools: a toolkit for redis 方法一 1. 查看主从对应关系 ./show_redis_map.sh 192.168.3.66:6379 192.168.3.66:6379 为集群任一主机ip地址和端口号 2.删除从节 阅读全文
posted @ 2022-09-16 14:46 操作工 阅读(1941) 评论(0) 推荐(0)
Hbase
摘要：1.Hbase Master启动失败问题 /var/log/base 日志报错 error while splitting logs in [hdfs://sinovatiocluster/hbase/WALs/owls41-9,16020,1630765272304-splitting] inst 阅读全文
posted @ 2022-09-16 13:32 操作工 阅读(77) 评论(0) 推荐(0)
kafka 监控工具 kafkaOffsetMonitor 安装步骤
摘要：详参 Kafka监控工具KafkaOffsetMonitor配置及使用 - 芹溪 - 博客园 (cnblogs.com) 阅读全文
posted @ 2022-09-16 12:54 操作工 阅读(14) 评论(0) 推荐(0)
ES 监控工具 cerebro-0.9.4 安装步骤
摘要：下载安装包文件至 /root/tools/cerebro-0.9.4 解压cerebro-0.9.4.tgz 修改cerebro-0.9.4/conf/application.conf # A list of known hosts hosts = [ { host = "http://192.16 阅读全文
posted @ 2022-09-16 12:48 操作工 阅读(386) 评论(0) 推荐(0)
HDFS 相关
摘要：1.基础命令 查看 hdfs dfs -ls / 上传 hdfs dfs -put 下载 hdfs dfs -get 删除 hdfs dfs -mv 2.hdfs生产数据块损坏/丢失修复方法 手动修复 hdfs fsck / #首先检查哪些数据块丢失了 hdfs debug recoverLease 阅读全文
posted @ 2022-09-16 11:50 操作工 阅读(89) 评论(0) 推荐(0)