随笔分类 -  ELK Stack

上一页 1 ··· 5 6 7 8 9 10 11 12 13 ··· 22 下一页
摘要:文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484584&idx=1&sn=accfb65830255f00c28ac1571725e493&chksm=eaa82c80dddfa596bef19161d713fe 阅读全文
posted @ 2020-05-12 18:11 哈喽哈喽111111 阅读(985) 评论(0) 推荐(0)
摘要:文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484454&idx=1&sn=43e95a27bd8635b73d78a23db79407fe&chksm=eaa82c0edddfa518e979b4b4fe5f6b 阅读全文
posted @ 2020-05-12 18:09 哈喽哈喽111111 阅读(1157) 评论(0) 推荐(0)
摘要:文章转载自: https://blog.csdn.net/laoyang360/article/details/51747266 引言: elasticsearch 的出现使得我们的存储、检索数据更快捷、方便。但很多情况下,我们的需求是:现在的数据存储在mysql、oracle等关系型传统数据库中, 阅读全文
posted @ 2020-05-12 18:07 哈喽哈喽111111 阅读(1514) 评论(0) 推荐(0)
摘要:文章转载自: https://www.cnblogs.com/dalaoyang/p/11018541.html 1.go mysql elasticsearch简介 go mysql elasticsearch是一个将MySQL数据自动同步到Elasticsearch的服务。 它首先使用mysql 阅读全文
posted @ 2020-05-12 18:02 哈喽哈喽111111 阅读(616) 评论(0) 推荐(0)
摘要:文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484411&idx=1&sn=1f5a371095d61bd0d6461ed111dd252b&chksm=eaa82bd3dddfa2c5b08831bfd42211 阅读全文
posted @ 2020-05-12 18:00 哈喽哈喽111111 阅读(678) 评论(0) 推荐(0)
摘要:文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484377&idx=1&sn=199bc88f700f427f4515afac4c7402f1&chksm=eaa82bf1dddfa2e7c9f4319b52fc7a 阅读全文
posted @ 2020-05-12 17:57 哈喽哈喽111111 阅读(935) 评论(0) 推荐(0)
摘要:文章转载自: https://mp.weixin.qq.com/s?__biz=MzI2NDY1MTA3OQ==&mid=2247484358&idx=1&sn=3a783479bb6a1852589f4c4cf3c5d310&chksm=eaa82beedddfa2f822db1492e5f82f 阅读全文
posted @ 2020-05-12 17:55 哈喽哈喽111111 阅读(1995) 评论(0) 推荐(0)
摘要:1、问题 源自星球同学的提问:es如何与hive或mysql结合使用?es不支持事务有什么好的弥补方案吗? 2、事务的核心概念 如果一个数据库声称支持事务的操作,那么该数据库必须要具备以下ACID四个特性: 原子性(Atomicity) 原子性是指事务包含的所有操作要么全部成功,要么全部失败回滚, 阅读全文
posted @ 2020-05-12 17:34 哈喽哈喽111111 阅读(6540) 评论(0) 推荐(1)
摘要:1、什么是堆内存? Java 中的堆是 JVM 所管理的最大的一块内存空间,主要用于存放各种类的实例对象。 在 Java 中,堆被划分成两个不同的区域: 新生代 ( Young )、 老年代 ( Old )。 新生代 ( Young ) 又被划分为三个区域 Eden、 From Survivor、 阅读全文
posted @ 2020-05-12 17:21 哈喽哈喽111111 阅读(313) 评论(0) 推荐(0)
摘要:1. ignore_above的作用 ES中用于设置超过设定字符后,不被索引或者存储。 2. 当字符超过给定长度后,能否存入 keyword类型的最大支持的长度为——32766个UTF 8类型的字符。 也就是说term精确匹配的最大支持的长度为32766个UTF 8个字符。 3. text类型和ke 阅读全文
posted @ 2020-05-12 16:31 哈喽哈喽111111 阅读(5221) 评论(0) 推荐(0)
摘要:1) 我应该有多少个分片? 答: 每个节点的分片数量保持在低于每1GB堆内存对应集群的分片在20 25之间。 因此,具有30GB堆内存的节点最多可以有600 750个分片,但是进一步低于此限制,您可以保持更好。 2) 我的分片应该有多大? 答:分片大小为50GB通常被界定为适用于各种用例的限制。 阅读全文
posted @ 2020-05-12 16:19 哈喽哈喽111111 阅读(419) 评论(0) 推荐(0)
摘要:1.了解ES集群拓扑结构 当我们启动Elasticsearch的实例,就会启动至少一个节点。相同集群名的多个节点的连接组成一个集群, 在默认情况下,集群中的每个节点都可以处理Http请求和集群节点的数据传输。 集群中的所有的节点都知道集群中其他所有的节点,可以将客户端请求转发到适当的节点。 默认情况 阅读全文
posted @ 2020-05-12 15:44 哈喽哈喽111111 阅读(477) 评论(0) 推荐(0)
摘要:1. MySQL 中的数据库(DataBase),等价于 ES 中的索引(Index)。 2. MySQL 中一个数据库下面有 N 张表(Table),等价于1个索引 Index 下面有 N 多类型(Type)。 3. MySQL 中一个数据库表(Table)下的数据由多行(Row)多列(colum 阅读全文
posted @ 2020-05-12 14:57 哈喽哈喽111111 阅读(8695) 评论(0) 推荐(0)
摘要:Logstash: 启动监控 配置文件:logstash.yml Logstash: 集中管理 意思是说服务器这边只是启动logstash,并没有执行任何配置文件,而是在集中管理这边设置配置参数信息等 角色权限: 用户权限: 在logstash.yml文件里做相应的配置: 直接启动logstash, 阅读全文
posted @ 2020-05-12 09:44 哈喽哈喽111111 阅读(2211) 评论(0) 推荐(0)
摘要:使用情况说明: 已经使用logstash拉取MySQL数据存储到es中,es中也创建了相应的索引,也存储了数据。假若把这个索引给删除了,再次进行同步操作的话要咋做,从最开始的数据进行同步,而不是新增的数据 官方文档地址:https://www.elastic.co/guide/en/logstash 阅读全文
posted @ 2020-05-11 18:22 哈喽哈喽111111 阅读(972) 评论(0) 推荐(0)
摘要:MySQL中数据样式 ES中数据样式 注意:若@timestamp不想使用数据表中的时间字段值,则可以使用系统时间值,但是要使用东八区的系统时间,不是UTC时间 阅读全文
posted @ 2020-05-11 16:18 哈喽哈喽111111 阅读(1840) 评论(0) 推荐(0)
摘要:logstash和elasticsearch是按照UTC时间的,kibana却是按照正常你所在的时区显示的,是因为kibana中可以配置时区信息。 具体看这个: logstash 的配置文件添加 这样output 输出的时间才是正确的,前提服务器时区已经修改了 阅读全文
posted @ 2020-05-11 11:33 哈喽哈喽111111 阅读(1039) 评论(0) 推荐(0)
摘要:官方文档地址:https://www.elastic.co/guide/en/logstash/current/plugins inputs jdbc.html plugins inputs jdbc jdbc_driver_library 配置多个SQL语句编辑 当需要从不同的数据库表或视图中查询 阅读全文
posted @ 2020-05-11 11:08 哈喽哈喽111111 阅读(349) 评论(0) 推荐(0)
摘要:针对单独一个数据表而言,大致可以分如下两种情况: 1.该数据表中有一个根据当前时间戳更新的字段,此时监控的是这个时间戳字段 具体可以看这个文章:https://www.cnblogs.com/sanduzxcvbnm/p/12858967.html 示例: modification_time就是表中 阅读全文
posted @ 2020-05-11 10:19 哈喽哈喽111111 阅读(1240) 评论(0) 推荐(0)
摘要:| Setting | Input type | Required | | | | | | " " | "boolean" | No | | " " | "hash" | No | | " " | "number" | No | | " " | "number" | No | | " " | "st 阅读全文
posted @ 2020-05-09 18:11 哈喽哈喽111111 阅读(5616) 评论(0) 推荐(0)

上一页 1 ··· 5 6 7 8 9 10 11 12 13 ··· 22 下一页