欢迎来到我的的博客园，祝大家学有所成，早点实现自己的人生理想。

CentOS7中ELK6.2.3安装

 
一、配置主机名
  1. hostnamectl set-hostname elk
  2. vim /etc/sysconfig/network修改HOSTNAME=elk
  3. 安装Java环境：yum install java-1.8.0-openjdk.x86_64
  4. 添加JAVA环境：vim /etc/profile，添加下列行，保存后执行source /etc/profile
    export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.191.b12-0.el7_5.x86_64/jre
    export CLASSPATH=.:$JAVA_HOME/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
    export PATH=$PATH:$JAVA_HOME/bin
  5. 配置网络：/etc/hosts中添加172.16.4.141 elk
  6. 关闭防火墙（如果因为其他原因不能关闭防火墙，也请不要禁止80端口）：systemctl stop firewalld.service
  7. 禁止防火墙自动启动：systemctl disable firewalld.service
  8. 打开文件/etc/security/limits.conf，添加下面四行内容：
    • * soft nofile 65536
    • * hard nofile 131072
    • * soft nproc 2048
    • * hard nproc 4096
  9. 打开文件/etc/sysctl.conf，添加下面一行内容：vm.max_map_count=655360
  10. 加载sysctl配置，执行命令：sysctl -p
  11. 重启: reboot
 
二、下载程序
  1. 请在ELK官网https://www.elastic.co/downloads下载以下文件，并放置到/opt目录下。
  2. 进入/opt目录下分别执行下列命令解压：
    • tar -zvxf elasticsearch-6.2.3.tar.gz
    • tar -zvxf logstash-6.2.3.tar.gz
    • tar -zvxf kibana-6.2.3-linux-x86_64.tar.gz
 
 
三、设置用户，ElasticSerach要求以非root身份启动，所以我们要创建一个用户：
  1. 创建用户组：groupadd elasticsearch
  2. 创建用户加入用户组：useradd elasticsearch -g elasticsearch
  3. 设置elasticsearch-6.2.3文件夹为用户elasticsearch所有：chown -R elasticsearch.elasticsearch /opt/elasticsearch-6.2.3
 
四、启动Elasticsearch
  1. 切换到用户elasticsearch：su elasticsearch；
  2. 进入目录/opt/elasticsearch-6.2.3；
  3. 执行启动命令：bin/elasticsearch -d，此时会在后台启动elasticsearch；
  4. 查看启动日志可执行命令：tail -f /opt/elasticsearch-6.2.3/logs/elasticsearch.log，大约五到十分钟后启动成功。
  5. 通过命令：ss -tanl查看9200、9300端口是否启动成功。
  6. 设置开机启动：将：/opt/elasticsearch-6.2.3/bin/elasticsearch -d加入到/etc/rc.d/rc.local末尾，并执行：chmod +x /etc/rc.d/rc.local
  7. 执行：curl 127.0.0.1:9200 检查服务是否正常，注意，此时外网可能无法访问Elasticsearch，这是正常情况。
  8. 如果要设置其它机器也能访问，可以修改config/elasticsearch.yml中的network.host : 0.0.0.0
  9. 如果要设置数据目录，可以修改config/elasticsearch.yml中的 path.data:/data/elk/data
  10. 如果要设置日志目录，可以修改config/elasticsearch.yml中的 path.logs:/data/elk/logs
  11. 建议在/opt/elasticsearch-6.2.3目录下新建一个start.sh角本，内容如下：
  12. #!/bin/bash
su elasticsearch<<!
cd /opt/elasticsearch-6.2.3
./bin/elasticsearch -d
exit
!
echo "elasticsearch is started."
  13. 执行chmod 777 start.sh，并在/etc/rc.d/rc.local中加入/opt/elasticsearch-6.2.3/start.sh来实现开机启动。
 
五、配置和启动Logstash
  1. cd /opt/logstash-6.2.3
  2. 在目录/opt/logstash-6.2.3下创建文件default.conf，内容如下：
    1. input {
    2.     #beats {
    3.     #    port => "5044"
    4.     #}
    5.     tcp {
    6.           port=> 5044
    7.           codec => "json"
    8.     }
    9. }
    10. filter {
    11.     grok {
    12.         match => { "message" => "%{COMBINEDAPACHELOG}" }
    13.     }
    14.     geoip {
    15.         source => "clientip"
    16.     }
    17. }
    18. output {
    19.     elasticsearch {
    20.         hosts => ["127.0.0.1:9200"]
    21.     }
    22. }
  3. 后台启动Logstash服务：nohup bin/logstash -f default.conf --config.reload.automatic &
  4. 查看日志 tail -f logs/logstash-plain.log或者ss -tanl检查是否5044端口已启动，如果启动表示已成功。
  5. 建议在/opt/logstash-6.2.3目录下新建一个start.sh角本，内容如下：
    1. #!/bin/bash
    2. nohup /opt/logstash-6.2.3/bin/logstash -f /opt/logstash-6.2.3/default.conf --config.reload.automatic &
  6. 执行chmod 777 start.sh，并在/etc/rc.d/rc.local中加入/opt/logstash-6.2.3/start.sh来实现开机启动。
 
六、配置和启动Kibana
  1. cd /opt/kibana-6.2.3-linux-x86_64
  2. 修改：config/kibana.yml，将#server.host:"localhost"修改为server.host:"0.0.0.0"
  3. 执行：bin/kibana 尝试启动，如果启动成功，建议新建一个角本start.sh，并设置内容如下：
    1. #!/bin/bash
    2. nohup /opt/kibana-6.2.3-linux-x86_64/bin/kibana &
  4. 执行chmod 777 ./start.sh并添加/opt/kibana-6.2.3-linux-x86_64/start.sh到/etc/rc.d/rc.local末尾实现开机启动。
  5. 执行ss -tanl检查5601端口是否已经完全启动。
 
七、安装完成说明
  • 至此，ELK已全部安装完成，亲测试OK。
  • 如果某一台服务器上的C#或JAVA程序产生日志，可以直接发送日志到LogStash。
  • 如果需要在某一台服务器有已输出的log文件，如Nginx、Tomcat，需要进行增量收集，可以使用安装并使用FileBeat
 
 
 
posted @ 2018-12-03 16:56  宋兴柱  阅读(295)  评论(0)  编辑  收藏  举报