05 2021 档案
摘要:Hive行转列和列转行 行转列(一行变多行) 方法1:简单粗暴 union all --不推荐 优点:好理解 缺点:多次select同一张表,造成计算量成倍增加;代码冗余,单个select条件复杂后会变得较难维护。 -- concat('height',':',height,',','weight'
阅读全文
摘要:VSCode常用键 官网链接:Visual Studio Code Tips and Tricks 更新日期:2021-05-22 TODO: 补充中文翻译 Shortcuts Description Ctrl+Shift+P Access all available commands based
阅读全文
摘要:HiveSQL优化的根本思想: 尽早尽量过滤数据,减少每个阶段的数据量 减少job数 解决数据倾斜问题 Hive SQL优化方式及使用技巧 https://www.cnblogs.com/fnlingnzb-learner/p/13087976.html Hive SQL的编译过程 https://
阅读全文
摘要:数据中台的精细化成本管理 原文连接:08 | 交付速度和质量问题解决了,老板说还得“省” (geekbang.org) 好的数据中台:快、准、省 数据部门是企业的成本中心,如果要展现自己的价值,一方面是支撑好业务,获得业务的认可;另外一方面就是精简成本,为公司省钱。 有哪些成本的陷阱 常见问题: 数
阅读全文

浙公网安备 33010602011771号