摘要：
1. 数仓研发流程 1.1 六个阶段 需求阶段：数据产品经理应如何应对不断变化的业务需求。 设计阶段：数据产品经理、数据开发者应如何综合性能、成本、效率、质量等因素，更好地组织与存储数据。 开发阶段：数据研发者如何高效、规范地进行编码工作。 测试阶段：测试人员应如何准确地暴露代码问题与项目风险，提升 阅读全文
posted @ 2025-03-20 19:05
钱塘江畔
阅读(96)
评论(0)
推荐(0)
摘要：
SASL/PLAIN 一、服务端配置 配置 config/server.properties # 配置ACL入口类 authorizer.class.name=kafka.security.auth.SimpleAclAuthorizer # SASL_PLAINTEXT # 在三台机器上换成每台机 阅读全文
posted @ 2025-03-20 19:04
钱塘江畔
阅读(85)
评论(0)
推荐(0)
摘要：
Client查询zk，找到hbase:meta表所在的regionserver Client请求hbase:meta表，查询Row所在的Region以及所在的regionserver 直连region，进行操作 缓存hbase:meta 阅读全文
posted @ 2025-03-20 19:01
钱塘江畔
阅读(14)
评论(0)
推荐(0)
摘要：
1. 依赖部署 # zookeeper # kafka server.1=c5:2881:3881 server.2=c6:2881:3881 server.3=c7:2881:3881 kafka-server-stop.sh bin/kafka-server-start.sh --daemon 阅读全文
posted @ 2025-03-20 19:00
钱塘江畔
阅读(39)
评论(0)
推荐(0)
摘要：
1. before update 备份 [[202108161706 mysql备份方法]] 步骤：全局锁-> dump -> stop -> rename -> install -> initial -> start -> source 验证：随机抽取表 2. shutdown server # 阅读全文
posted @ 2025-03-20 18:56
钱塘江畔
阅读(16)
评论(0)
推荐(0)
摘要：
生成broker ID The broker id for this server. If unset, a unique broker id will be generated.To avoid conflicts between zookeeper generated broker id's a 阅读全文
posted @ 2025-03-20 18:53
钱塘江畔
阅读(6)
评论(0)
推荐(0)
摘要：
1. MyJob类 public class HelloJob implements Job { @Override public void execute(JobExecutionContext context) throws JobExecutionException { System.out. 阅读全文
posted @ 2025-03-20 18:52
钱塘江畔
阅读(14)
评论(0)
推荐(0)
摘要：
安装好maven并配置环境变量 命令行安装jar包 cmd窗口: 安装指定文件到本地仓库命令：mvn install:install-file -DgroupId=<groupId> : 设置项目代码的包名(一般用组织名) -DartifactId=<artifactId> : 设置项目名或模块名 阅读全文
posted @ 2025-03-20 18:52
钱塘江畔
阅读(35)
评论(0)
推荐(0)
摘要：
1. 心跳机制 Kafka 的心跳是 Kafka Consumer 和 Broker 之间的健康检查，只有当 Broker Coordinator 正常时，Consumer 才会发送心跳。 Consumer 和 Rebalance 相关的 2 个配置参数： 参数 字段 session.timeout 阅读全文
posted @ 2025-03-20 18:51
钱塘江畔
阅读(109)
评论(0)
推荐(0)
摘要：
二分法在链表中的应用 使链表也能快速的查找，本身就能快速的增删 数组靠索引查找快， 但增删慢无法避免 -- 跳表：在原有序链表的基础上增加了多级索引，通过索引实现快速查找，以空间换时间 特点： 多层结构，每一层随机概率产生 每一层都是有序链表，默认升序，最底层包含所有元素 每个节点包含两个指针：向右 阅读全文
posted @ 2025-03-20 18:49
钱塘江畔
阅读(9)
评论(0)
推荐(0)
浙公网安备 33010602011771号