随笔分类 -  ELK

ELK日志收集系统
摘要:Kafka集群部署 http://kafka.apache.org/documentationhttp://kafka.apachecn.org 实验环境 study62study63study64 zk zk zk kafka kafka kafka jdk安装 每台主机都需要安装,此处以stud 阅读全文
posted @ 2020-05-07 09:42 renato-zhang 阅读(159) 评论(0) 推荐(0)
摘要:Elastic Search 7.x 集群配置 概念 Cluster 集群 一个 Elasticsearch 集群由一个或多个节点(Node)组成,每个集群都有一个共同的集群名称作为标识 Node节点 一个 Elasticsearch 实例即一个 Node,一台机器可以有多个实例,正常使用下每个实例 阅读全文
posted @ 2020-05-07 09:31 renato-zhang 阅读(567) 评论(0) 推荐(0)
摘要:# 二、部署Logstash## 2.1 logstash环境准备及安装Logstash是一个开源的数据收集引擎,可以水平伸缩,而且logstash整个ELK当中拥有最多插件的一个组件,其可以接受来自不同源的数据并同意输出到指定的且可以使多个不同目的地 ### 2.1.1 环境准备关闭防火墙和sel 阅读全文
posted @ 2020-04-20 08:00 renato-zhang 阅读(305) 评论(0) 推荐(0)
摘要:ELK技术栈(二) 2020/4/14 一、通过rsyslog收集haproxy日志 在centos6及之前的版本叫做syslog,centos7开始叫做rsyslog,根据官方的介绍,rsyslog(2013年版本)可以带到每秒转发百万条日志的级别,官方网址:http://www.rsyslog. 阅读全文
posted @ 2020-04-17 15:37 renato-zhang 阅读(311) 评论(0) 推荐(0)
摘要:日志写入redis及读取redis 用一台服务器按照部署redis服务,专门用于日志缓存使用,用于web服务器产生大量日志的场景,例如下面的服务器内存即将被使用完毕,查看是因为redis服务保存了大量的数据没有被读取而占用了大量的内存空间。 2.1.1 部署redis [root@study63 s 阅读全文
posted @ 2020-04-15 13:54 renato-zhang 阅读(2314) 评论(0) 推荐(0)
摘要:一、通过rsyslog收集haproxy日志 在centos6及之前的版本叫做syslog,centos7开始叫做rsyslog,根据官方的介绍,rsyslog(2013年版本)可以带到每秒转发百万条日志的级别,官方网址:http://www.rsyslog.com/,确认系统安装版本命令如下: [ 阅读全文
posted @ 2020-04-15 13:52 renato-zhang 阅读(569) 评论(0) 推荐(0)
摘要:1.1 资源准备 主机操作系统软件及版本数据盘 study62 centos7.6 elk5.4.0 sdb study63 centos7.6 elk5.4.0 sdb 1.2 环境准备 1.2.1 准备数据盘 此处以study62为例,study63采取同样操作 [root@study62 sr 阅读全文
posted @ 2020-04-15 13:46 renato-zhang 阅读(66) 评论(0) 推荐(0)