陆小叁
这是一个充满鲜花的世界

随笔分类 -  Elasticsearch

logstash同步千万级数据问题
摘要:在实际业务当中,数据量达到的千万级别,为了提高搜索效率,决定采用Elasticsearch做搜索,相对于之前来说,速度提升了很多。 但是现在面临的问题是,业务数据在不断的修改(批量的修改mysql数据库数据)。这样做的话,就会不断的去更新ES。同步ES采用的是logstash做的数据同步,有相对延迟 阅读全文
posted @ 2022-03-19 09:01 陆小叁 阅读(504) 评论(0) 推荐(0)
通过Logstash全量和增量同步Mysql一对多关系到Elasticsearch
摘要:前言 在实际开发项目过程当中,难免会使用到Elasticsearch做搜索。文章描述从Mysql通过Logstash实时同步到Elasticsearch,下面就开始来进行实现吧!具体的Elasticsearch+Logstash+kibana搭建,请移步到 ELK搭建步骤。 实现方案 本人总结了两种 阅读全文
posted @ 2021-08-14 14:20 陆小叁 阅读(1072) 评论(1) 推荐(0)