06 2022 档案

Limit offset,size 与limit size性能比较
摘要：结论：limit offset，size比limit size要慢，且offset值越大，sql的执行速度越慢。 当offset过大，会引发深度分页的问题，目前不管是mysql还是elasticsearch都没有很好的方法去解决这个问题，只能通过限制查询数量或 分批获取的方式进行规避。 大部分时候是 阅读全文

posted @ 2022-06-08 11:06 黑子菜园 阅读(393) 评论(0) 推荐(0)

（重点）Es搜索引擎在数据量很大的情况下，如何提高查询效率？
摘要：总结：1、尽量让数据都保留在filesystem os cache文件系统操作缓存里，查询速度是毫秒级的； 2、数据预热（跟前一个一样，也是留在cache里），冷热分离（存在不同的shard分片上） 3、数据写入es的document文件前，在java逻辑里先处理好类似联表的操作，后续直接拿docu 阅读全文

posted @ 2022-06-06 17:27 黑子菜园 阅读(4353) 评论(0) 推荐(0)

（重点）ES的写入与查询的工作原理
摘要：一、ES写数据的大致步骤： [客户端 ] 请求 > [ 协调节点] hash一下数据 > [primary shard ] 同步数据 > [ replica shard] ^ | | 通知协调节点 | 1、客户端发送请求过来一条数据（document） 随机选择集群中的一个节点Node2（此时Nod 阅读全文

posted @ 2022-06-06 00:11 黑子菜园 阅读(2047) 评论(0) 推荐(0)

导航