Elastic (ELK) Stack简介及整体架构部署

简介

Elastic (ELK) Stack 是 Elastic 公司的产品软件。是目前流行的集中式日志解决方案。

主要包含了ELK、Beats、Apm、 Elastic Agent等产品。

ELK ：文档地址，三个开源软件的缩写，分别为Elasticsearch、Logstash、Kibana。是一个可视化日志分析平台。
Apm：文档工具，资源监控型工具，应用程序内收集深入全面的性能指标和错误。其允许您实时监测数以千计的应用程序的性能
Beats：文档地址，这是一个轻量级日志采集器，其实 Beats 家族有几个成员，早期的 ELK 架构中使用 Logstash 收集、解析日志，但是 Logstash 对内存、cpu、io 等资源消耗比较高。相比 Logstash，Beats 所占系统的 CPU 和内存几乎可以忽略不计。
- Packetbeat：网络数据（收集网络流量数据）
- Metricbeat：指标（收集系统、进程和文件系统级别的CPU和内存使用情况等数据）
- Filebeat：日志文件（收集文件数据）
- Winlogbeat：windows事件日志（收集Windows事件日志数据）
- Auditbeat：审计数据（收集审计日志）
- Heartbeat：运行时间监控（收集系统运行时的数据）
Elastic Agent：文档地址，Elastic 代理

产品	备注
elasticsearch	开源分布式搜索引擎，提供搜集、分析、存储数据三大功能
logstash	数据收集处理引擎。支持动态的从各种数据源搜集数据，并对数据进行过滤、分析、丰富、统一格式等操作，然后发给 Elasticsearch 存储
kibana	ElasticSearch 和 Logstash的Web可视化工具
apm server	apm 服务端
beats	Filebeat、Packetbea、Winlogbeat、Metricbeat、Heartbeat、Auditbeat、Functionbeat 等产品。主要是轻量化方式收集、解析和传输数据
elastic-agent	用于日志、指标、安全数据和威胁防御多项功能，发送日志给elasticsearch
elasticsearch-hade	用于查询elasticsearch日志的Web 可视化工具