随笔分类 - ELK
ElasticSearch、LogStash、Kibana、Beats知识分享
摘要:一、前言 最近工作中有这样一个ElasticSearch(以下简称ES)写入的场景,Flink处理完数据实时写入ES。现在需要将一批历史数据通过Flink加载到到ES,有两个点需要保证: 对于历史数据,ES已有文档,则舍弃旧数据,ES没有则插入历史数据。 对于新数据,能对现有的ES数据进行更新。 参
阅读全文
摘要:一、前言 ElasticSearch(以下简称ES)的数据写入支持高并发,高并发就会带来很普遍的数据一致性问题。常见的解决方法就是加锁。同样,ES为了保证高并发写的数据一致性问题,加入了类似于锁的实现方法--版本控制。锁从其中的一个角度可分为乐观锁和悲观锁。 对于同一个数据的并发操作,悲观锁认为自己
阅读全文
浙公网安备 33010602011771号