上一页 1 ··· 17 18 19 20 21 22 23 24 25 ··· 88 下一页
摘要: 场景: 采用 MongoShake 同步数据到kafka, 然后用python 处理, 做etl , 或者其他操作: # 同步 db_sea_user , db_tom_user to db_all_user (mongodb) , 并且添加db_name(customer) 代码: MongoOp 阅读全文
posted @ 2021-09-27 17:45 lshan 阅读(228) 评论(0) 推荐(0)
摘要: 目的: MongoShake 数据同步到kafka(json格式),是带有{"Name":"key","Value":"123"} 的json, 实际上这个json 为 {"key":"123"} 转换如下: import json ''' k:节点name v:节点value cn:当前节点 '' 阅读全文
posted @ 2021-09-27 17:33 lshan 阅读(111) 评论(2) 推荐(0)
摘要: python swich case,使用字典实现,原理,闭包 # swich case def handler_result(op, ns, value): todos = { "i": insert, "u": update, "d": delete } method = todos.get(op 阅读全文
posted @ 2021-09-27 11:44 lshan 阅读(50) 评论(0) 推荐(0)
摘要: 概要: 目的:增量同步mongodb 的数据(mongo需集群,或者副本集模式) 1.官网文档 2 基本安装,启动,监控 3.小试牛刀,最佳实践 0.官网文档: github: https://github.com/alibaba/MongoShake/ releases: https://gith 阅读全文
posted @ 2021-09-26 16:41 lshan 阅读(3347) 评论(0) 推荐(0)
摘要: 场景: 一次性取出redis一个field中的所有key,并遍历。 方案一:(生产环境禁用keys) 使用redisTemplate.opsForHash().keys("filed") 前期数据量少,感j觉不到性能问题。数据量上去后keys方法严重消耗CPU,导致服务"假死", 其他连接阻塞 , 阅读全文
posted @ 2021-09-18 16:02 lshan 阅读(220) 评论(0) 推荐(0)
该文被密码保护。 阅读全文
posted @ 2021-09-14 18:45 lshan 阅读(0) 评论(0) 推荐(0)
摘要: SpringContextUtils import org.apache.commons.lang3.StringUtils; import org.springframework.beans.BeansException; import org.springframework.context.Ap 阅读全文
posted @ 2021-09-10 11:05 lshan 阅读(1758) 评论(0) 推荐(0)
该文被密码保护。 阅读全文
posted @ 2021-09-03 15:55 lshan 阅读(8) 评论(0) 推荐(0)
摘要: idea 个人文件信息模板,之前没有设置的同学,参考设置下: 选择File --> Settings --> Editor --> Code Style --> File and Code Templates --> Python Script java : class #if (${PACKAGE 阅读全文
posted @ 2021-09-01 09:48 lshan 阅读(225) 评论(0) 推荐(0)
摘要: 原文:https://blog.csdn.net/sundehui01/article/details/106234778 单台服务器做直播,总归有单点风险,利用SRS的Forward机制 + Edge Server设计,可以很容易搭建一个大规模的高可用集群,示意图如下 源站服务器集群:origin 阅读全文
posted @ 2021-08-30 11:46 lshan 阅读(1183) 评论(0) 推荐(0)
上一页 1 ··· 17 18 19 20 21 22 23 24 25 ··· 88 下一页