摘要: 1.基于LSM算法的高效索引研究 基于LSM(Log-Structured Merge-Tree)算法的高效索引研究主要是针对如何提高LSM算法在处理大规模数据时的查询效率而展开的。以下是几个可能的研究方向: (1)索引数据结构优化:在LSM算法中,内存中的有序数据结构通常是基于二叉查找树或跳表等数 阅读全文
posted @ 2024-11-25 11:28 陈小他 阅读(94) 评论(2) 推荐(0)
摘要: 1.技术理论 索引技术是提高数据查询效率的关键,特别是在大规模数据场景下。不同的索引技术具有各自的优缺点,适用于不同的应用场景。通过对B树与B+树、R树、哈希索引以及LSM树等高效索引技术的详细分析,我们可以更好地理解它们的特点和应用范围,并为实际应用场景选择最合适的索引技术。 1.1 B树与B+树 阅读全文
posted @ 2024-11-25 11:03 陈小他 阅读(76) 评论(2) 推荐(0)
摘要: 1.背景意义及研究目的 1.1 研究背景和需求 随着江苏移动公司业务应用持续丰富,生产和汇聚的数据不断增加,数据总量大幅上升,数据中台共有数百万张数据表,万亿条数据,存量数据总容量达数PB,增量数据日均约10TB。面对海量数据,快速查询定位数据、及时获取最新数据的用户诉求日益强烈。而主要汇聚和存放数 阅读全文
posted @ 2024-11-25 10:30 陈小他 阅读(74) 评论(3) 推荐(0)
摘要: import requests import json import random import datetime real_data = { "sys_id": "123321", "ab_id": "123321", "ser_id": "", "partition_key": "25", "d 阅读全文
posted @ 2022-02-07 09:44 陈小他 阅读(1715) 评论(0) 推荐(0)
摘要: # 修改对应host的登陆密码 use mysql; update user set authentication_string=password('abcabcabc') where user='root' and Host='%'; grant all privileges on *.* to 阅读全文
posted @ 2022-01-28 15:27 陈小他 阅读(425) 评论(0) 推荐(0)
摘要: 可以根据自己想占用CPU的个数设置 #!/bin/bash VAR=$2 SHELL_NAME=`basename $0` #echo $SHELL_NAME function start() { echo "Starting The Cpu USAGE..........Done!" for i 阅读全文
posted @ 2022-01-28 15:15 陈小他 阅读(769) 评论(0) 推荐(0)
摘要: 在linux上安装了zipp第三方python包 下载路径: zipp · PyPI https://pypi.org/project/zipp 但是安装好了之后 版本用pip list 查看总是0.0.0,因为依赖要校验版本是>0.5 所以导致一直功能过不去 修改 setup.cfg 添加vers 阅读全文
posted @ 2021-12-27 17:25 陈小他 阅读(216) 评论(0) 推荐(0)
摘要: 右键会话 选择session options 进入当前选项框 按照右边的进行设置,其中需要注意的就是日志名称中需要包含%D 然后确定 最后点击file 打开log session 然后再执行命令,都会在刚才配置的路径下生成日志文件 阅读全文
posted @ 2021-12-23 15:59 陈小他 阅读(948) 评论(0) 推荐(0)
window.cnblogsConfig = { footer: { style: 1, }, }