小人物的奋斗

ES系列十九、kibana基本查询、可视化、仪表盘用法

摘要：一. 定义索引模式匹配 1、前缀模糊匹配，一个模式匹配多个索引每一个数据集导入到Elasticsearch后会有一个索引匹配模式，在上段内容莎士比亚数据集有一个索引名称为shakespeare，账户数据集的索引名称为bank。一个索引匹配模式就是一个字符串包含可选的通配符，它能匹配多个索引。比如，阅读全文

posted @ 2018-09-23 20:40 小人物的奋斗阅读(9909) 评论(0) 推荐(1) 编辑

ES系列十八、FileBeat发送日志到logstash、ES、多个output过滤配置

摘要：一、FileBeat基本概念简单概述最近在了解ELK做日志采集相关的内容，这篇文章主要讲解通过filebeat来实现日志的收集。日志采集的工具有很多种，如fluentd, flume, logstash,betas等等。首先要知道为什么要使用filebeat呢？因为logstash是jvm跑的，阅读全文

posted @ 2018-09-20 02:06 小人物的奋斗阅读(44123) 评论(0) 推荐(2) 编辑

ES系列十七、logback+ELK日志搭建

摘要：一、ELK应用场景在复杂的企业应用服务群中,记录日志方式多种多样，并且不易归档以及提供日志监控的机制。无论是开发人员还是运维人员都无法准确的定位服务、服务器上面出现的种种问题，也没有高效搜索日志内容从而快速定位问题的方式。因此需要一个集中式、独立的、搜集管理各个服务和服务器上的日志信息，集中管理，阅读全文

posted @ 2018-09-18 00:40 小人物的奋斗阅读(10065) 评论(0) 推荐(0) 编辑

ES系列十六、集群配置和维护管理

摘要：一、修改配置文件 1.节点配置 1.vim elasticsearch.yml 其他节点文件除了节点名称不一样，其他都一样。 2.验证 1.启动三台机器ES和head 2.访问head地址查看集群一共两个三个节点，test有5分片，每个分片两个副本，停掉节点二，集群副本0，2，4不见了二、集群规阅读全文

posted @ 2018-09-12 00:36 小人物的奋斗阅读(2384) 评论(0) 推荐(0) 编辑

ES系列十五、ES常用Java Client API

摘要：一、简介 1.先看ES的架构图二、ES支持的客户端连接方式 1.REST API http请求，例如，浏览器请求get方法；利用Postman等工具发起REST请求；java 发起httpClient请求等。 2.Transport 连接 socket连接，用官方提供的TransPort客户端，底阅读全文

posted @ 2018-09-08 14:25 小人物的奋斗阅读(45728) 评论(0) 推荐(3) 编辑

ES系列十四、ES聚合分析（聚合分析简介、指标聚合、桶聚合）

摘要：一、聚合分析简介 1. ES聚合分析是什么？聚合分析是数据库中重要的功能特性，完成对一个查询的数据集中数据的聚合计算，如：找出某字段（或计算表达式的结果）的最大值、最小值，计算和、平均值等。ES作为搜索引擎兼数据库，同样提供了强大的聚合分析能力。对一个数据集求最大、最小、和、平均值等指标的聚合，阅读全文

posted @ 2018-09-03 23:49 小人物的奋斗阅读(19104) 评论(1) 推荐(4) 编辑

ES系列十三、Elasticsearch Suggester API(自动补全）

摘要： 1.概念 1.补全api主要分为四类整体效果类似百度搜索，如图： 2.Term Suggester(纠错补全） 2.1.api 1.建立索引 2.插入数据 3.看下储存的分词有哪些结果： { "tokens": [ { "token": "lucene", "start_offset": 0, 阅读全文

posted @ 2018-09-02 18:05 小人物的奋斗阅读(10056) 评论(0) 推荐(2) 编辑

ES系列十二、ES的scroll Api及分页实例

摘要： 1.官方api 1.Scroll概念 Version：6.1 英文原文地址：Scroll 当一个搜索请求返回单页结果时，可以使用 scroll API 检索体积大量（甚至全部）结果，这和在传统数据库中使用游标的方式非常相似。不要把 scroll 用于实时请求，它主要用于大数据量的场景。例如：将一个阅读全文

posted @ 2018-09-01 11:48 小人物的奋斗阅读(29145) 评论(0) 推荐(3) 编辑

ES系列十一、ES的index、store、_source、copy_to和all的区别

摘要： 1.基本概念 1.1._source 存储的原始数据。_source中的内容就是搜索api返回的内容，如：结果：默认情况下，Elasticsearch里面有2份内容，一份是原始文档，也就是_source字段里的内容，我们在Elasticsearch中搜索文档，查看的文档内容就是_source中的阅读全文

posted @ 2018-08-23 22:59 小人物的奋斗阅读(14253) 评论(0) 推荐(1) 编辑

ES系列九、ES优化聚合查询之深度优先和广度优先

摘要： 1.优化聚合查询示例假设我们现在有一些关于电影的数据集，每条数据里面会有一个数组类型的字段存储表演该电影的所有演员的名字。 { "actors" : [ "Fred Jones", "Mary Jane", "Elizabeth Worthing" ] } 如果我们想要查询出演影片最多的十个演员以阅读全文

posted @ 2018-08-20 23:27 小人物的奋斗阅读(4168) 评论(0) 推荐(1) 编辑

不积小流，无以成江海！