随笔分类 -  中间件

摘要:consul命令汇总 命令 kv - Key/Value存储 agent - Agent控制 catalog - 管理nodes和services health - 管理健康监测 session - Session操作 acl - ACL创建和管理 event - 用户Events status - 阅读全文
posted @ 2021-07-20 18:39 运维小兵#杨 阅读(1139) 评论(0) 推荐(0)
摘要:调整hash表大小 echo "options ip_vs conn_tab_bits=20" > /etc/modprobe.conf 关闭gro和lro ethtool -K em1 gro off ethtool -K em1 lro off 开机后生效 cat /sbin/ifup-loca 阅读全文
posted @ 2021-07-20 17:19 运维小兵#杨 阅读(120) 评论(0) 推荐(0)
摘要:一、下载解压 wget https://artifacts.elastic.co/downloads/kibana/kibana-6.2.4-darwin-x86_64.tar.gz tar -zxvf kibana-6.2.4-darwin-x86_64.tar.gz mv kibana-6.2. 阅读全文
posted @ 2021-07-20 16:26 运维小兵#杨 阅读(189) 评论(0) 推荐(0)
摘要:Logstash 提供三大功能 INPUT 进入 FILTER 过滤功能 OUTPUT 出去 一 、下载解压 wget https://artifacts.elastic.co/downloads/logstash/logstash-6.2.4.tar.gz tar -zxvf logstash-6 阅读全文
posted @ 2021-07-20 16:16 运维小兵#杨 阅读(282) 评论(0) 推荐(0)
摘要:五、部署graylog集群 1、安装启动 导入 rpm 包 rpm -Uvh https://packages.graylog2.org/repo/packages/graylog-4.0-repository_latest.rpm 安装 yum install graylog-server -y 阅读全文
posted @ 2021-07-20 15:57 运维小兵#杨 阅读(1791) 评论(0) 推荐(0)
摘要:四、部署filebeat 我这里用的是filebeat-7.3.2 1、下载rpm包 wget https://mirrors.huaweicloud.com/filebeat/7.3.2/filebeat-7.3.2-x86_64.rpm yum -y install filebeat-7.3.2 阅读全文
posted @ 2021-07-20 15:38 运维小兵#杨 阅读(1524) 评论(0) 推荐(0)
摘要:三、部署kafka+zookeeper集群 kafka需要jdk环境,参考第二章的elasticsearch集群的jdk安装,也可以自行安装,我这边都在相同的3台机器,所以就不用在安装jdk了 1、下载安装包并解压 kafka用的是2.3.0,zookeeper用的是3.6.0 wget https 阅读全文
posted @ 2021-07-20 14:58 运维小兵#杨 阅读(638) 评论(0) 推荐(0)
摘要:二、elasticsearch集群部署(单机版也可以) 本次部署的elasticsearch版本是7.11.2 1、配置环境 系统优化,内核优化 # vim /etc/sysctl.conf fs.file-max=655360 vm.max_map_count=655360 vm.swappine 阅读全文
posted @ 2021-07-20 13:48 运维小兵#杨 阅读(644) 评论(0) 推荐(0)
摘要:此次搭建graylog日志平台,使用到的组件有mongo、elasticsearch、kafka、zookeeper、graylog、filebeat,下面总结一下搭建过程: 一、部署mongo集群(单机版也可以) 1、时间同步 安装ntpdate,添加定时任务同步时间 最好所有机器都配置时间同步 阅读全文
posted @ 2021-07-20 13:21 运维小兵#杨 阅读(916) 评论(0) 推荐(0)
摘要:分片分布是把索引分片分布到节点的过程。这个操作会在初次启动集群,副本分配,负载均衡,或增加删除节点时进行。 下面是一些与分片分布相关的设置: cluster.routing.allocation.allow_rebalance 设置根据集群中机器的状态来重新分配分片,可以设置为always, ind 阅读全文
posted @ 2021-07-19 18:47 运维小兵#杨 阅读(736) 评论(0) 推荐(0)
摘要:1.server.properties配置 在创建topic时候设置参数,会覆盖server.properties的相同属性的配置 log.retention.bytes=xxx topic每个分区的最大文件大小,一个topic的大小限制 = 分区数*log.retention.bytes。-1没有 阅读全文
posted @ 2021-07-19 17:53 运维小兵#杨 阅读(2173) 评论(0) 推荐(0)
摘要:一、prometheus安装 1、下载二进制包 cd /opt wget https://github.com/prometheus/prometheus/releases/download/v2.5.0/prometheus-2.5.0.linux-amd64.tar.gz tar zxf pro 阅读全文
posted @ 2021-07-19 17:06 运维小兵#杨 阅读(1140) 评论(0) 推荐(0)
摘要:一、网络分区的判定 网络分区的发生多与网络问题有关,RabbitMQ中net_ticktime这个参数用来判定网络分区,默认为60s。在集群中的每个节点会每隔 net_ticktime的1/4 (也就是默认15秒)来计一次tick,如果有任何数据被写入此节点中,那么此节点被ticked,一个节点连续 阅读全文
posted @ 2021-07-19 14:45 运维小兵#杨 阅读(815) 评论(0) 推荐(0)