06 2020 档案

摘要：脚本通过ssh检查大数据环境中各节点的相关实例是否运行正常，包括：zk、hadoop-ha、hdfs、yarn、hbase、hive-metastore、hiveserver2、kafka。 注意修改成自己的集群节点名称及kafka版本 #!/bin/bash # 定义机器名前缀 HN_PREFIX 阅读全文

摘要：1、监测方案： 通过shell可配置化脚本，配置es集群中节点，然后通过shell中执行crul命令监测集群中所有节点是否正常，如果监测到节点不正常，那么就保存节点ip地址和端口号等信息，将异常的集群节点信息通过邮件通知管理员，让管理员尽快登陆服务器查看和解决集群中有问题的节点。 2、监测脚本： 脚 阅读全文

摘要：1. 了解各个组件的作用 Filebeat是一个日志文件托运工具，在你的服务器上安装客户端后，filebeat会监控日志目录或者指定的日志文件，追踪读取这些文件（追踪文件的变化，不停的读）Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据Logstash是 阅读全文