摘要: 使用Logstash同步Mysql到Easysearch 从 MySQL 同步数据到 ES 有多种方案,这次我们使用 ELK 技术栈中的 Logstash 来将数据从 MySQL 同步到 Easysearch 。 ## 方案前提 1. MySQL 表记录必须有主键,比如 id 字段。通过该字段,可将 Easysearch 索引数据与 MySQL 表数据形成 阅读全文
posted @ 2023-08-15 09:58 极限实验室 阅读(59) 评论(0) 推荐(0)
摘要: 叮~~ 叮~~,你们听到什么声音了吗?没错,那是我们全新升级的告警系统带来的惊喜和能量!我们像闪电侠一样快速优化了告警通知功能,它将帮助你避开所有的系统故障陷阱,像超级英雄一样守护系统安全! 序集 我们深知及时、有效的告警通知对于系统的稳定运行至关重要。因此在近期已上线的 INFINI Consol 阅读全文
posted @ 2023-08-14 02:05 极限实验室 阅读(64) 评论(0) 推荐(0)
摘要: INFINI Labs 产品更新 | Easysearch 支持 SQL 查询、Console 告警功能支持邮件等多渠道 ![release](https://www.infinilabs.com/img/blog/release/banner.png) INFINI Labs 产品又更新啦~。本次更新概要如下:Easysearch 新增 SQL 插件和JDBC 驱动,支持 SQL 查询,支持 SQL 常用函数等;Co 阅读全文
posted @ 2023-08-11 12:06 极限实验室 阅读(57) 评论(0) 推荐(0)
摘要: INFINI Labs 产品更新 | Easysearch 新增分词插件、Gateway 支持邮件发送等功能 ![](https://www.infinilabs.com/img/blog/release/banner.png) INFINI Labs 产品又更新啦~,本次更新概要如下:Easysearch 新增了分词插件、优化了生命周期管理功能等;Gateway 新增 smtp 过滤器来支持邮件的发送,支 阅读全文
posted @ 2023-07-22 13:39 极限实验室 阅读(39) 评论(0) 推荐(0)
摘要: 通过极限网关来加速索引写入速度 ## 操作手册 ### 测试环境 - 主集群:[http://10.0.1.2:9200](http://10.0.1.2:9200) , 用户名: elastic 密码:\*\*\* ,9 节点 , 硬件规格:12C64GB (31GB JVM) - 备集群:[http://10.0.1.15:9 阅读全文
posted @ 2023-07-21 15:43 极限实验室 阅读(57) 评论(0) 推荐(0)
摘要: 用极限网关实现 ES 容灾,简单! 身为 IT 人士,大伙身边的各种系统肯定不少吧。系统虽多,但最最最重要的那套、那几套,大伙肯定是捧在手心,关怀备至。如此重要的系统,万一发生故障了且短期无法恢复,该如何保障业务持续运行? 有过这方面思考或经验的同学,肯定脱口而出--切灾备啊。 是的,接下来我来介绍下我们的 ES 灾备方案。当然如果你 阅读全文
posted @ 2023-07-19 17:47 极限实验室 阅读(115) 评论(0) 推荐(0)
摘要: 有这么一个需求: > 网关里怎样对跨集群搜索进行支持的呢?我想实现: 输入的搜索请求是 `lp:9200/index1/_search` > 这个索引在 3 个集群上,需要跨集群检索,也就是网关能否改成 `lp:9200/cluster01:index1,cluster02,index1,clust 阅读全文
posted @ 2023-07-18 09:14 极限实验室 阅读(37) 评论(0) 推荐(0)
摘要: ## 摘要 为了验证当前集群经常出现索引超时以及请求拒绝的问题,现模拟线上集群环境及索引设置,通过压测工具随机生成测试数据,针对当前的 850 个分片的索引,以及减半之后的索引,以及更小分片索引的写入进行压测,使用不同的并发、不同的批次大小来观察索引的吞吐情况,并记录写入队列的堆积情况,用来分析分片 阅读全文
posted @ 2023-07-17 17:23 极限实验室 阅读(90) 评论(0) 推荐(0)
摘要: 在使用 ES 的过程中,如果 ES 集群中存放的是敏感数据,是不能够随便供人查看的。什么?在排查故障?那也不行,合规高于一切。 不知道大家有没有遇到过上面描述的情景,或者如果是你遇到了,你会怎么办呢? 我们常常讲,解决问题要抓住问题的本质。人类的本质是复读机,上述问题的本质是"敏感"。 既然问题的本 阅读全文
posted @ 2023-07-14 15:02 极限实验室 阅读(31) 评论(0) 推荐(0)
摘要: 近日,由 DataFun 主办的 **DataFunSummit 2023 数据基础架构峰会** 圆满落下帷幕,本次峰会邀请了腾讯、百度、字节、**极限科技**、Zilliz 等众多企业技术专家为大家带来分布式存储以及向量数据库的架构原理、性能优化与实践解析分享。 ![](https://infin 阅读全文
posted @ 2023-07-13 09:50 极限实验室 阅读(154) 评论(0) 推荐(0)