随笔分类 -  ELK

系统日志服务rsyslog
摘要：一、系统日志服务rsyslog：多线程，可以基于UDP、TCP、TLS协议进行远程通信，还可以将数据存储到MySQL、PGSQL、Oracle，强大的过滤器，可实现过滤日志信息中任何部分，可以自定义输出格式。rsyslog有两个守护进程进程；syslogd：记录系统日志(用户空间的用户进程)，klo 阅读全文
posted @ 2017-06-05 16:07 fansik 阅读(457) 评论(0) 推荐(0)
Nginx日志格式以及相关配置
摘要：一、Nginx日志格式以及参数说明log_format main '$remote_addr - $remote_user [$time_local] "$request" ' '$status $body_bytes_sent "$http_referer" ' '"$http_user_agen 阅读全文
posted @ 2017-06-05 11:35 fansik 阅读(1039) 评论(0) 推荐(0)
Logstash简介
摘要：支持多种数据获取机制，通过TCP/UDP协议、文件、syslog、windows、EventLogs及STDIN等；获取到数据口，支持对数据进行过滤、修改等操作JRuby语言研发，工作在JVM中 agent/serverLogstash安装yum install logstash-5.2.2.rpm 阅读全文
posted @ 2017-05-04 11:57 fansik 阅读(426) 评论(0) 推荐(0)
Lucene简介
摘要：文档：Document包含了一个或多个域的容器； field：value域： 有很多选项 索引选项、存储选项、域向量使用选项 可以单个使用，也可组合起来使用 索引选项用于通过倒排索引来控制文本是否可被搜索； Index.ANYLYZED:分析(切词)并单独作为索引项； Index.Not_ANYLY 阅读全文
posted @ 2017-05-04 11:55 fansik 阅读(191) 评论(0) 推荐(0)
ElasticSearch简介
摘要：ES是一个基于Lucene实现的开源、分布式、Restful的全文本搜索引擎；此外，他还是一个分布式实时文档存储，其中每个文档的每个field均是被索引的数据，且可被搜索；也是一个带实时分析功能的分布式搜索引擎，能够扩展至数以百计的节点实时处理PB级的数据。一、基本组件 索引(index):文档容器 阅读全文
posted @ 2017-05-04 11:53 fansik 阅读(184) 评论(0) 推荐(0)