大数据流动

摘要： 对大数据和数据分析感兴趣的同学，如何入门一直是一个大问题。 而对于找工作的同学，笔试和面试环节也一直是一个让人头疼的问题。 其实企业也很头疼，不进行笔试，怕被面试者忽悠。进行笔试可能又把某些大牛筛出去了。 但是不管怎么说，有些硬技能还是需要的，比如做大数据来说，如果只是了解各种组件的使用，是远远不够 阅读全文

摘要： 实时数仓以端到端低延迟、SQL标准化、快速响应变化、数据统一为目标。美团外卖数据智能组总结的最佳实践是：一个通用的实时生产平台跟一个通用交互式实时分析引擎相互配合，同时满足实时和准实时业务场景。两者合理分工，互相补充，形成易开发、易维护且效率高的流水线，兼顾开发效率与生产成本，以较好的投入产出比满足 阅读全文

摘要： ​ 今天来聊聊大数据相关的证书，提到证书就不得不说含金量。我们都知道注册会计师，注册电气工程师，注册消防工程师等等，相信都听过其他同学朋友有在考的，这种证书含金量就很高，而且可以挂靠的方式极大的提高收入水平。 一、大数据证书 ​ 那么问题来了，大数据有没有这种高含金量的证书呢？我也查了工信部的网站， 阅读全文

摘要： 前言 ​ 每个组织都有自己的数据管理方式。有的公司准备自研并制定了长期计划，有的公司使用最新的数据管理工具和技术，有的公司则是为了满足监管机构的要求。这几种的思路完全不一样。 ​ 要让公司成为真正的数据驱动型组织，不仅仅需要制定数据策略或推出更新的软件技术。关键在于数据的整体治理和管理，解决这个问题 阅读全文

摘要： ​ 用户画像是大数据顶层应用中最重要的一环，搭建一套适合本公司体系的用户画像尤为重要。但是，用户画像的资料往往理论居多，实践少，更少有工程化的实战案例。 ​ 本文档结合了常见的用户画像架构，使用Elasticsearch作为底层存储支撑，用户画像的检索和可视化效率得到了大幅度的提升。文档从用户画像的 阅读全文

摘要： 据达摩院官网消息，12月28日，阿里巴巴达摩院发布2022十大科技趋势，这是达摩院连续第四年发布前沿科技趋势预测。 报告表示，达摩院以公开论文库和公开专利库作为基础数据进行分析，从 236 个领域中筛选出 159 个应用与基础科学领域，基于论文与专利数量的绝对值与增长率，筛选出在学界与产业界需要重点 阅读全文

摘要： 随着数字化转型的工作推进，数据治理的工作已经被越来越多的公司提上了日程。作为新一代的元数据管理平台，Datahub在近一年的时间里发展迅猛，大有取代老牌元数据管理工具Atlas之势。国内Datahub的资料非常少，大部分公司想使用Datahub作为自己的元数据管理平台，但可参考的资料太少。 所以整理 阅读全文

摘要： 大家好，我是独孤风。今天为大家推荐的是一个完全开源的项目StreamX。该项目的发起者Ben也是我的好朋友。 什么是StreamX，StreamX 是Flink & Spark极速开发脚手架，流批一体一站式大数据平台。 自2021年3月开源以来，贡献者已累计发展到10多位。 随着Flink&Spar 阅读全文

摘要： 大数据的岗位都有哪些，都是做什么的？这个问题恐怕困扰着很多人，因为一直没有统一的标准,就容易造成这种混乱的情况。搜索某招聘网站，可以看到这样的结果。 其实有时候我都不知道自己是哪一个岗位，感觉都符合，感觉又不符合。 当然这种问题肯定是暂时，近日《大数据从业人员能力要求》正式发布，并于11月1日开始实 阅读全文

摘要： 大数据作为一门偏实践类的学科，有没有可以提升自己简历含金量的证书呢？ 最近总有同学咨询大数据专业可以考的证书的问题。目前来看，大数据面试更注重的是工作经验，以及对大数据专业知识的掌握程度。大数据是一门特别注重实践的学科，所以还是建议大家将实践放在首位，在本地搭好大数据集群好好的练一练。 当然，如果是 阅读全文