随笔分类 -  nx架构10期

摘要:split条件 阅读全文
posted @ 2022-09-29 13:59 十一vs十一 阅读(31) 评论(0) 推荐(0)
摘要:想· 日志级别 阅读全文
posted @ 2022-09-28 13:31 十一vs十一 阅读(56) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2022-09-28 13:04 十一vs十一 阅读(58) 评论(0) 推荐(0)
摘要:从节点 阅读全文
posted @ 2022-09-27 20:14 十一vs十一 阅读(56) 评论(0) 推荐(0)
摘要:重要部分 阅读全文
posted @ 2022-09-27 19:44 十一vs十一 阅读(34) 评论(0) 推荐(0)
摘要:ods层4张表变成1张表 阅读全文
posted @ 2022-09-26 22:40 十一vs十一 阅读(28) 评论(0) 推荐(0)
摘要:6 各个功能页面原型 阅读全文
posted @ 2022-09-26 17:43 十一vs十一 阅读(28) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2022-09-25 17:06 十一vs十一 阅读(28) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2022-09-25 10:53 十一vs十一 阅读(21) 评论(0) 推荐(0)
摘要:hive定义 sql中解析json的用法 sql中用脚本 sort by替换order by案例 阅读全文
posted @ 2022-09-24 17:53 十一vs十一 阅读(31) 评论(0) 推荐(0)
摘要:双缓冲方案 写入本地是第一个实现,写入远程jounalnode是第二个实现 namenode用到锁的地方 阅读全文
posted @ 2022-09-23 08:36 十一vs十一 阅读(44) 评论(0) 推荐(0)
摘要:hdfs写数据流程 契约部分 hdfs文件最小单位 创建socket请求发送给dataXceiverserver 两个datanode之间通过blockReceiver建立管道 将数据发送到下游 管道内的所有数据写成功才移除ackqueue中的数据 阅读全文
posted @ 2022-09-22 23:13 十一vs十一 阅读(34) 评论(0) 推荐(0)
摘要:standby同步数据 这用到装饰者模式了 阅读全文
posted @ 2022-09-22 21:44 十一vs十一 阅读(22) 评论(0) 推荐(0)
摘要:datenode的启动流程 datenode注册流程图 阅读全文
posted @ 2022-09-21 22:57 十一vs十一 阅读(31) 评论(0) 推荐(0)
摘要:底层源码 编写MapReduce套路 MapReduce任务提交源码 MapReduce逻辑切片 读取数据是读取到下一个逻辑切片的前半行数据 接下来将shuffle 阅读全文
posted @ 2022-09-21 14:03 十一vs十一 阅读(27) 评论(0) 推荐(0)
摘要:MapReduce流程图 - 播客 MapReduce代码 hadoop序列化 阅读全文
posted @ 2022-09-21 09:45 十一vs十一 阅读(31) 评论(0) 推荐(0)
摘要:链接oracle 另外一种读取配置文件的方式 测试udf代码 sparksql第二节课程 阅读全文
posted @ 2022-09-20 17:50 十一vs十一 阅读(38) 评论(0) 推荐(0)
摘要:设计模式第二节 voleitile 动态代理 阅读全文
posted @ 2022-09-19 22:53 十一vs十一 阅读(42) 评论(0) 推荐(0)
摘要:1、eden区满了之后放到to区并计数+1, 2.将原来的to区和from区互换 3.from区满了之后放入老年代 阅读全文
posted @ 2022-09-17 20:02 十一vs十一 阅读(65) 评论(0) 推荐(0)