Docker安装Elasticsearch与Kibana

一、Elasticsearch

  Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java语言开发的,并作为Apache许可条款下的开放源码发布,是一种流行的企业级搜索引擎。Elasticsearch用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。官方客户端在Java、.NET(C#)、PHP、Python、Apache Groovy、Ruby和许多其他语言中都是可用的。根据DB-Engines的排名显示,Elasticsearch是最受欢迎的企业搜索引擎,其次是Apache Solr,也是基于Lucene。

  Elasticsearch 是一个分布式、高扩展、高实时的搜索与数据分析引擎。它能很方便的使大量数据具有搜索、分析和探索的能力。充分利用Elasticsearch的水平伸缩性,能使数据在生产环境变得更有价值。Elasticsearch 的实现原理主要分为以下几个步骤,首先用户将数据提交到Elasticsearch 数据库中,再通过分词控制器去将对应的语句分词,将其权重和分词结果一并存入数据,当用户搜索数据时候,再根据权重将结果排名,打分,再将返回结果呈现给用户。

  Elasticsearch是与名为Logstash的数据收集和日志解析引擎以及名为Kibana的分析和可视化平台一起开发的。这三个产品被设计成一个集成解决方案,称为“Elastic Stack”(以前称为“ELK stack”)。
Elasticsearch可以用于搜索各种文档。它提供可扩展的搜索,具有接近实时的搜索,并支持多租户。Elasticsearch是分布式的,这意味着索引可以被分成分片,每个分片可以有0个或多个副本。每个节点托管一个或多个分片,并充当协调器将操作委托给正确的分片。再平衡和路由是自动完成的。相关数据通常存储在同一个索引中,该索引由一个或多个主分片和零个或多个复制分片组成。一旦创建了索引,就不能更改主分片的数量。

  Elasticsearch使用Lucene,并试图通过JSON和Java API提供其所有特性。它支持facetting和percolating,如果新文档与注册查询匹配,这对于通知非常有用。另一个特性称为“网关”,处理索引的长期持久性;例如,在服务器崩溃的情况下,可以从网关恢复索引。Elasticsearch支持实时GET请求,适合作为NoSQL数据存储,但缺少分布式事务。

二、Kibana

  Kibana是一个开源的分析与可视化平台,设计出来用于和Elasticsearch一起使用的。你可以用kibana搜索、查看存放在Elasticsearch中的数据。Kibana与Elasticsearch的交互方式是各种不同的图表、表格、地图等,直观的展示数据,从而达到高级的数据分析与可视化的目的。

  Elasticsearch、Logstash和Kibana这三个技术就是我们常说的ELK技术栈,可以说这三个技术的组合是大数据领域中一个很巧妙的设计。一种很典型的MVC思想,模型持久层,视图层和控制层。Logstash担任控制层的角色,负责搜集和过滤数据。Elasticsearch担任数据持久层的角色,负责储存数据。而我们这章的主题Kibana担任视图层角色,拥有各种维度的查询和分析,并使用图形化的界面展示存放在Elasticsearch中的数据。

三、Docker安装Elasticsearch与Kibana

下载镜像

docker pull elasticsearch:7.16.2

docker pull kibana:7.16.2

创建软件目录

mkdir -p /opt/elasticsearch/config

mkdir -p /opt/elasticsearch/data

mkdir -p /opt/elasticsearch/plugins

vim /opt/elasticsearch/config/elasticsearch.yml

1 http.host: 0.0.0.0
2 xpack.security.enabled: false

编写创建容器的脚本

vim /opt/elasticsearch/elasticsearch.sh

1 docker run --name elasticsearch -p 9200:9200 -p 9300:9300 \
2 -e "discovery.type=single-node" \
3 -e ES_JAVA_OPTS="-Xms64m -Xmx512m" \
4 -v /opt/elasticsearch/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
5 -v /opt/elasticsearch/data:/usr/share/elasticsearch/data \
6 -v /opt/elasticsearch/plugins:/usr/share/elasticsearch/plugins \
7 -d elasticsearch:7.16.2

vim /opt/elasticsearch/kibana.sh

1 docker run --name kibana -e ELASTICSEARCH_HOSTS=http://172.19.45.101:9200 -p 5601:5601 \
2 -d kibana:7.16.2

创建容器

chmod -R 777 /opt/elasticsearch

cd /opt/elasticsearch

./elasticsearch.sh

./kibana.sh

查看安装结果

docker ps

 浏览器访问9200与5601端口即可看到已安装成功。

posted @ 2022-01-05 14:25  光何  阅读(204)  评论(0编辑  收藏  举报