后山前堂客

摘要： 原文连接 https://mp.weixin.qq.com/s/G-7jQXtQ_T0gHvzcvkYqxA ，原文出自 微信公众号 “数据社”。 大家好，我是一哥，有朋友问我，有没有主数据落地的方案？emmm...我手上有不少方案，但是新的涉密，老的没太大参考价值。 我顺手请教了一下蔡春久老师，发 阅读全文

摘要： 新入职一家企业，从事数据治理相关工作，直接领导肯定会问后续的工作如何开展，我的思考如下： 回答这个问题前，我们得明确这个问题的潜在条件。一家企业要想做数据治理，并且放出来相关的岗位，说明该企业在数据治理的工作上已经有了充分的内部讨论，比如：数据治理的宏观目标、数据治理战略路线图、团队组织架构归属、团 阅读全文

摘要： 以下文章来源于微信公众号“与智慧做朋友” ，作者李志勇 【原文连接：https://mp.weixin.qq.com/s/DzRWEO2pVb2mxW3rMW1Shg】 —背景— 当下各地和各行业都相继成立了数据管理部门（大数据局），旨在集中资源更大的发挥信息化、数据共享和大数据分析的赋能价值，但是 阅读全文

摘要： 我不懂音乐，但是知道有些歌很好听，其中部分是歌词写得好，但更多的是歌的旋律好。 假如一首歌是一个独立的个体，那么我们在欣赏这首歌的时候，是站在第三方的角度，以相对宏观的视野去欣赏这首歌的完整片段或全部。从中我们能体会到声调、声色、声响等变化的规律，这种规律构成了歌曲的旋律，也就是歌曲的整体节奏。 我 阅读全文

摘要： 瘾的定义 上瘾，百度上的解释为“爱好某种事物而成为癖好：喝茶喝上了瘾，一天不喝就难受”。什么是癖好呢？百度给出的解释是“指对某种事物的特别爱好”，并非贬义词。 由上述两个解释可知，“上瘾”本身不带有感情色彩，也就是说，“瘾”可好可坏，也可不好不坏。 隐有很多种类型，比如： 运动类：羽毛球、篮球、足球 阅读全文

摘要： 数字化转型和数据治理的关系 数字化转型的本质是：在数据和算法定义的世界中，以数据的自动流动化解复杂系统的不确定性，优化资源配置效率，构建企业新型竞争优势（来源：《重构-数据字画转型的逻辑》） 数字化转型的基础是数据。只有高质量的数据才能给数字化转型提供高质量的支撑，而数据质量也是数据质量体系的核心环 阅读全文

摘要： 总结石头大佬对于华为数据之道的解密文章，基于当下视角回顾华为数据管理的偶然和必然。本文梳理的原始素材来源于“ 数据不能承受之重”公众号的“解密华为数据之道”主题。 经典语言总结： 要求我按照“原教旨主义”的原则，找出该方案的本源依据，在工作中，不仅仅是提出解决问题的方案，还需要探究答案背后的逻辑。 阅读全文

摘要： 特点： 分布式、可扩展、支持海量数据存储的NoSQL数据库，可以支持海量数据的秒级别查询 逻辑结构： 列族 列 rowkey region：类似关系型数据库的表，是hbase表的横向切片。hbase定义表时，只需要声明列族，不需要声明具体的列。写入数据时可以按需在一个列族中动态扩展列。 store： 阅读全文

摘要： Yarn主要负责集群的资源管理，以便于在一个集群中运行多种计算框架的任务，比如MR，Spark，Flink等 Yarn主要包括两个组件： ResourceManager： 负责全局资源管理，简称RM 包括Application Manager（AppManager，负责App master管理） 和 阅读全文

摘要： 1. 数据认责的定义 明确数据价值链上相关参与方及其职责，包括责任的认清（明确责任边界）和认领（对数据问题负责，尤其是数据质量问题）。 2. 数据认责的原因 数据的质量问题驱动数据认责，包括两个方面： Ø 当前数据质量问题解决：需要确定明确的角色和个人/组织，来认领该责任； Ø 数据质量的长期保障： 阅读全文