ExplorerMan

摘要： 简单讲ES开箱即用，不用任何配置也能玩转搜索引擎；以下内容是根据易企秀线上实际使用场景进行的安装和配置，支持冷热数据分离 1、安装 Linux 环境下载安装包 curl -L -O https://artifacts.elastic.co/downloads/elasticsearch/elasti 阅读全文

摘要： 一、前言 ? 日志主要包括系统日志和应用程序日志，运维和开发人员可以通过日志了解服务器中软硬件的信息，检查应用程序或系统的故障，了解故障出现的原因，以便解决问题。分析日志可以更清楚的了解服务器的状态和系统安全状况，从而可以维护服务器稳定运行。 ? 但是日志通常都是存储在各自的服务器中。如果管理数十台 阅读全文

摘要： 简单概述 最近在了解ELK做日志采集相关的内容，这篇文章主要讲解通过filebeat来实现日志的收集。日志采集的工具有很多种，如fluentd, flume, logstash,betas等等。首先要知道为什么要使用filebeat呢？因为logstash是jvm跑的，资源消耗比较大，启动一个log 阅读全文

摘要： 说起来甚是惭愧，博主在写这篇文章的时候，还没有系统性的学习一下ES，只知道可以拿来做全文检索，功能很牛逼，但是接到了任务不想做也不行， leader让我搭建一下分布式的ES集群环境，用来支持企业信用数据的检索，刚开始宝宝一脸蒙逼，只是之前自己本地搭建过一个测试玩过，开发任务也是忙的不行， 一直也没时 阅读全文

摘要： 为何要搭建 Elasticsearch 集群 凡事都要讲究个为什么。在搭建集群之前，我们首先先问一句，为什么我们需要搭建集群？它有什么优势呢？ 高可用性 Elasticsearch 作为一个搜索引擎，我们对它的基本要求就是存储海量数据并且可以在非常短的时间内查询到我们想要的信息。所以第一步我们需要保 阅读全文

摘要： 一、集群规划 搭建一个集群我们需要考虑如下几个问题： 1. 我们需要多大规模的集群？ 2. 集群中的节点角色如何分配？ 3. 如何避免脑裂问题？ 4. 索引应该设置多少个分片？ 5. 分片应该设置几个副本？ 下面我们就来分析和回答这几个问题 1、我们需要多大规模的集群？ 需要从以下两个方面考虑： 1 阅读全文

摘要： 1.使用head插件找到想关掉的节点进行关停 2.使用命令kill杀掉服务器的ES进程即可1.查找ES进程ps -ef | grep elastic 2.杀掉ES进程kill -9 2382（进程号） 3.重启ESsh elasticsearch -d 需要对ES节点进行重新启动或正常关机的时候，有 阅读全文

摘要： 内容目录： Benchmark工具 测算redis处理实际生产请求的QPS/TPS 内容目录： Benchmark工具 测算redis处理实际生产请求的QPS/TPS 测算Redis处理实际生产请求的QPS/TPS Benchmark工具 redis发布版本中自带了redis-benchmark性能 阅读全文

摘要： 这里使用filebeat直连elasticsearch的形式完成数据传输，由于没有logstash，所有对于原始数据的过滤略显尴尬（logstash的filter非常强大）。 但是由于业务需求，还是需要将message（原始数据）中的某些字段进行提取，具体方式如下： 1. /path/目录下建立pi 阅读全文

摘要： 使用python连接es并执行最基本的查询 from elasticsearch import Elasticsearch es = Elasticsearch(["localhost:9200"]) para = {"_source":"message"} es.search(index=inde 阅读全文