2019年11月13日

logstash 6.6.0 读取nginx日志 插入到elasticsearch中

摘要: logstash.conf input { # For detail config for log4j as input, # See: https://www.elastic.co/guide/en/logstash/ file { type => "log" # log 名 path => "/ 阅读全文

posted @ 2019-11-13 21:41 ExplorerMan 阅读(324) 评论(0) 推荐(0) 编辑

微服务架构中服务注册与发现

摘要: https://blog.csdn.net/u011537073/article/details/69663858 想象一下,如果你在写代码调用一个有REST API或Thrift API的服务,你的代码需要知道一个服务实例的网络地址(IP地址和端口)。运行在物理硬件上的传统应用中,服务实例的网络地 阅读全文

posted @ 2019-11-13 21:28 ExplorerMan 阅读(1357) 评论(0) 推荐(0) 编辑

logstash kafka output 日志处理

摘要: 今天在用logstash解析日志并传送给kafka的时候,发现kafka能收到数据但数据内容已经丢失,具体如下: 在logstash output中增加输出样式之后,问题解决kafka再次接受到的内容如下图所示: output{ kafka{ topic_id => "log_test" # kaf 阅读全文

posted @ 2019-11-13 21:00 ExplorerMan 阅读(1578) 评论(0) 推荐(0) 编辑

filebeat输出到kafka

摘要: # cat filebeat.yml 阅读全文

posted @ 2019-11-13 20:52 ExplorerMan 阅读(929) 评论(0) 推荐(0) 编辑

nginx优化之request_time 和upstream_response_time差别

摘要: 1、request_time 官网描述:request processing time in seconds with a milliseconds resolution; time elapsed between the first bytes were read from the client 阅读全文

posted @ 2019-11-13 18:33 ExplorerMan 阅读(354) 评论(0) 推荐(0) 编辑

利用ldirectord实现lvs后端realserver健康状态检查

摘要: ldirectord用来实现LVS负载均衡资源在主、备节点间的故障转移。在首次启动时,ldirectord可以自动创建IPVS表。此外,它还可以监控各RealServer的运行状态,一旦发现某RealServer运行异常时,还可以将其从IPVS表中移除。 ldirectord进程通过向RealSer 阅读全文

posted @ 2019-11-13 17:16 ExplorerMan 阅读(393) 评论(0) 推荐(0) 编辑

ELK 架构之 Logstash 和 Filebeat 安装配置

摘要: 阅读目录: 1. 环境准备 2. 安装 Logstash 3. 配置 Logstash 4. Logstash 采集的日志数据,在 Kibana 中显示 5. 安装配置 Filebeat 6. Filebeat 采集的日志数据,在 Kibana 中显示 7. Filebeat 采集日志数据,Logs 阅读全文

posted @ 2019-11-13 16:38 ExplorerMan 阅读(492) 评论(0) 推荐(0) 编辑

四层、七层负载均衡的区别

摘要: ** 所谓四层就是基于IP+端口的负载均衡;七层就是基于URL等应用层信息的负载均衡;**同理,还有基于MAC地址的二层负载均衡和基于IP地址的三层负载均衡。 换句换说,二层负载均衡会通过一个虚拟MAC地址接收请求,然后再分配到真实的MAC地址;三层负载均衡会通过一个虚拟IP地址接收请求,然后再分配 阅读全文

posted @ 2019-11-13 15:58 ExplorerMan 阅读(213) 评论(0) 推荐(0) 编辑

logstash 和filebeat 是什么关系

摘要: 因为logstash是jvm跑的,资源消耗比较大,所以后来作者又用golang写了一个功能较少但是资源消耗也小的轻量级的logstash-forwarder。不过作者只是一个人,加入http://elastic.co公司以后,因为es公司本身还收购了另一个开源项目packetbeat,而这个项目专门 阅读全文

posted @ 2019-11-13 11:41 ExplorerMan 阅读(1137) 评论(0) 推荐(0) 编辑

导航