摘要: 1、集群状态red、yellow处理方法 1.red表示主分片数据不完整,通常时由于某个索引的主分片为分片unassigned,找出这个分片未分配的原因,解决即可; curl -XGET http://{ESIP}:9200/_cluster/health?level=indices 2.yello 阅读全文
posted @ 2020-02-18 19:40 蘇氏加多寶 阅读(4023) 评论(0) 推荐(0) 编辑
摘要: 1、内核分配策略:参数overcommit_memory echo "1" > /proc/sys/vm/overcommit_memory vm.overcommit_memory 含义 0 表示内核将检查是否有足够的可用内存。如果有足够的可用内存,内存申请通过,否则内存申请失败,并把错误返回给应 阅读全文
posted @ 2020-02-17 17:09 蘇氏加多寶 阅读(304) 评论(0) 推荐(0) 编辑
摘要: 一、RocketMQ介绍 1、相关术语名词 1. NameSrv:是一个几乎无状态节点,可集群部署,节点之间无任何信息同步。 2. Broker:分为Master与Slave,一个Master可以对应多个Slave,但是一个Slave只能对应一个Master,BrokerId为0表示Master,M 阅读全文
posted @ 2020-02-16 17:26 蘇氏加多寶 阅读(501) 评论(0) 推荐(0) 编辑
摘要: 创建topic,指定备份分区数 bin/kafka-topics.sh --create --zookeeper zk:2181 --replication-factor 2 --partitions 4 --topic test-topic 查看topic 查看topic列表 bin/kafka- 阅读全文
posted @ 2020-02-16 17:20 蘇氏加多寶 阅读(1372) 评论(0) 推荐(0) 编辑
摘要: 一、ES介绍 1、基础概念介绍 1. 索引:Elasticsearch中的“索引”有点像关系数据库中的数据库。 它是存储/索引数据的地方; 2.分片 shard “分片”是Lucene的一个索引。 它本身就是一个功能齐全的搜索引擎。 “索引”可以由单个分片组成,但通常由多个分片组成,一部分主分片、一 阅读全文
posted @ 2020-02-16 17:12 蘇氏加多寶 阅读(742) 评论(0) 推荐(0) 编辑
摘要: # my global config global: scrape_interval: 10s # Set the scrape interval to every 15 seconds. Default is every 1 minute. evaluation_interval: 10s # E 阅读全文
posted @ 2020-02-16 17:06 蘇氏加多寶 阅读(192) 评论(0) 推荐(0) 编辑
摘要: 1、action.yml actions: 1: action: index_settings options: index_settings: index: routing.allocation.require.hotwarm_type: warm ignore_empty_list: True 阅读全文
posted @ 2020-02-16 16:49 蘇氏加多寶 阅读(630) 评论(0) 推荐(0) 编辑
摘要: #!/bin/bash #sed -i 's/^export JAVA_HOME=.*$/export JAVA_HOME=\/usr\/local\/jdk11/' /etc/profile.d/java.sh #source /etc/profile #node_name=`hostname`" 阅读全文
posted @ 2020-02-15 12:06 蘇氏加多寶 阅读(312) 评论(0) 推荐(0) 编辑
摘要: 一、单个大索引的缺陷 如果每天亿万+的实时增量数据呢,基于以下几点原因,单个索引是无法满足要求的; 1、存储大小限制维度 单个分片(Shard)实际是 Lucene 的索引,单分片能存储的最大文档数是:2,147,483,519 (= Integer.MAX_VALUE - 128)。如下命令能查看 阅读全文
posted @ 2020-02-11 14:40 蘇氏加多寶 阅读(995) 评论(0) 推荐(0) 编辑
摘要: cluster.name: ${clusterName} node.master: ${master} node.data: ${data} path.data: /home/service/var/esuser/${httpPort} #path.logs: /path/to/logs netwo 阅读全文
posted @ 2020-02-10 21:09 蘇氏加多寶 阅读(129) 评论(0) 推荐(0) 编辑