小得盈满

摘要： kong是基于openresty构建的一个网关，并且直接带了很多的功能比如反向代理、负载均衡、限流等模块直接开箱即用，同时兼具OpenResty的高性能，大部分情况下无需编程就可以实现想要的功能，下面在CentOS8 Linux上使用源码编译的方式安装kong，kong的官网是：https://ko 阅读全文

摘要： OpenResty是一款基于Nginx和Lua的高性能Web平台，在nginx基础之上集成了大量的lua库，第三方模块等，以便搭建各种处理高并发、可扩展的Web应用、服务或网关，并且OpenResty完全兼容nginx所有的配置，可以直接当做nginx来使用，而且可以支持lua进行编程处理相应的逻辑 阅读全文

摘要： 之前写过HDFS 2.6的部署，最近项目中尝试使用最新的HDFS 3.2.1做离线存储，部署方式略有不同，所以这里再简单写一下，这里只涉及到存储因此不再配置yarn，只配置HDFS最基本的服务NameNode、DataNode、以及SecondaryNameNode，我这里用到的包是hadoop-3 阅读全文

摘要： ElasticSearch目前最新版是7.7.0，其中部署的细节和之前的6.x有很多的不同，所以这里单独拉出来写一下，希望对用7.x的童鞋有一些帮助，然后部署完ES后配套的kibana也是7.7.0，这个就简单了放到最后说，下面先进入ES 7.7.0的部署. 首先是下载es的安装包，官网下载即可，我 阅读全文

摘要： redhat/centos 7.x默认使用的时间同步服务为ntp服务，但是从redhat/centos 8开始在官方的仓库中移除了ntp软件，换成默认的chrony进行时间同步的服务，虽然也可以通过添加第三方的源安装ntp，但是毕竟还是使用官方推荐的更好一些，使用和ntp基本上一样，个人感觉比ntp 阅读全文

摘要： 上篇文章简单叙述了Flink standalone集群的基础部署，在生产环境中假如只有1个jobmanager的话，那么这个节点一旦挂掉，所有运行的task都会中断，带来的影响比较大，因此在生产环境至少要保证jobmanager的高可用，至少2个节点，也可以将jobmanager和taskmanag 阅读全文

摘要： Flink Standalone模式部署集群是最简单的一种部署方式，不依赖于其他的组件，另外还支持YARN/Mesos/Docker等模式下的部署，这里使用的flink版本为最新的稳定版1.9.1版本，对应的Scala版本是2.11，二进制包为：flink-1.9.1-bin-scala_2.11. 阅读全文

摘要： RabbitMQ是基于erlang开发的消息服务，官网为：https://www.rabbitmq.com，RabbitMQ要依赖erlang运行，所以要先安装erlang环境，rabbitmq可以用rpm或通用二进制包安装，这里使用二进制包的方式安装，版本为3.8.1，对应的erlang版本为22 阅读全文

摘要： 之前说过python confluent kafka客户端做kerberos认证的过程，如果使用kafka python客户端的话同样也可以进行kerberos的认证，具体的认证机制这里不再描述，主要叙述配置认证的过程 需要的模块有下面这些： kafka-python：https://pypi.or 阅读全文

摘要： kafka的认证方式一般有如下3种： 1. SASL/GSSAPI 从版本0.9.0.0开始支持 2. SASL/PLAIN 从版本0.10.0.0开始支持 3. SASL/SCRAM-SHA-256 以及 SASL/SCRAM-SHA-512 从版本0.10.2.0开始支持 其中第一种SASL/G 阅读全文