上一页 1 2 3 4 5 6 ··· 24 下一页
摘要: 大家好,我是独孤风,大数据流动的作者。 本文基于最新的 Hadoop 3.3.6 的版本编写,带大家通过单机版充分了解 Apache Hadoop 的使用。本文更强调实践,实践是大数据学习的重要环节,也能在实践中对该技术有更深的理解,所以一些理论知识建议大家多阅读相关的书籍(都在资料包中)。 本文档 阅读全文
posted @ 2023-12-06 11:08 独孤风 阅读(276) 评论(0) 推荐(0) 编辑
摘要: 大家好,我是独孤风,从本周开始,争取每周为大家带来一个优秀的开源项目推荐。 开源项目不仅促进了技术的发展和普及,还为全球范围内的开发者和用户社区建立了一个共享知识、协作和创新的平台。站在巨人的肩膀上才能看的更远,我们平时也应该多多关注开源项目,不仅学习其丰富的知识,也要找机会为开源事业做出自己的贡献 阅读全文
posted @ 2023-12-05 08:06 独孤风 阅读(930) 评论(0) 推荐(0) 编辑
摘要: Apache Paimon是一个流式数据湖平台。致力于构建一个实时、高效的流式数据湖平台。这个项目采用了先进的流式计算技术,使企业能够实时处理和分析大量数据。Apache Paimon 的核心优势在于它对于大数据生态系统中流式处理的支持,尤其是在高并发和低延迟方面表现出色。 目前业界主流数据湖存储格 阅读全文
posted @ 2023-12-01 09:12 独孤风 阅读(94) 评论(0) 推荐(0) 编辑
摘要: 上周,OpenAI开发者大会上OpenAI发布了一系列震撼人心的功能。而最让我感兴趣的,就是GPT4的数据分析功能了。话不多说,赶紧上号体验一下。 在最新登录GPT4的时候,都会有下面这个提示,目前已经支持联网,分析数据,生成图片的功能了。这是plus用户都可以使用的。 然后我们可以在上方很容易的选 阅读全文
posted @ 2023-11-13 10:53 独孤风 阅读(790) 评论(1) 推荐(3) 编辑
摘要: 大家好,我是独孤风,一位曾经的港口煤炭工人,目前在某国企任大数据负责人,公众号大数据流动主理人。 首先告诉大家一个好消息,在大家共同的努力下,我们的CDMP国际数据治理认证训练营(7-8月)基本收官,全员成绩都已经公布,进入等证书的状态了,估计月底证书都能收到。 对于本次训练营我已经尽了自己最大的努 阅读全文
posted @ 2023-08-30 09:44 独孤风 阅读(76) 评论(0) 推荐(0) 编辑
摘要: 大家好,我是独孤风,大数据流动的作者。 曾几何时,我在第一次安装JDK环境的时候也遇到了不小的麻烦,当时还有朋友就因为这个环境问题觉得自己根本不是编程的料,选择了放弃。当时有个段子说,“如果不是JDK环境没搞定,我一定是一个编程天才”。权当一笑,但是环境问题确实是个大问题。 开源元数据管理平台Dat 阅读全文
posted @ 2023-08-07 09:49 独孤风 阅读(258) 评论(0) 推荐(0) 编辑
摘要: 大家好,我是独孤风。 开源元数据管理平台Datahub近期得到了飞速的发展。已经更新到了0.10.5的版本,来咨询我的小伙伴也越来越多,特别是安装过程有很多问题。本文经过和群里大伙伴的共同讨论,总结出安装部署Datahub最新版本的部署手册,希望能帮助到大家。 文章较长,建议收藏点赞在看后,再仔细阅 阅读全文
posted @ 2023-08-02 08:10 独孤风 阅读(906) 评论(1) 推荐(2) 编辑
摘要: 大家好,我是独孤风,大数据流动的作者。 最近几个概念频繁出现在大家的视野内。 什么是数据管理,数据治理,数据中心,数据中台,数据湖? 他们之间又有怎么样的区别和联系呢? 这几个概念常常让人混淆,今天我们就来详细解析一下。 # 一、数据管理 数据管理是指组织对其整个数据生命周期进行的规划、执行和控制, 阅读全文
posted @ 2023-07-20 09:13 独孤风 阅读(900) 评论(2) 推荐(1) 编辑
摘要: 大家好,我是独孤风,一位曾经的港口煤炭工人,目前在某国企任大数据负责人,公众号大数据流动主理人。在最近的两年的时间里,因为公司的需求,还有大数据的发展趋势所在,我开始学习数据治理的相关知识。今天给大家分享一体化的元数据管理平台——OpenMetadata。 本文档基于官网及个人实践资料整理。后续的文 阅读全文
posted @ 2023-07-12 10:20 独孤风 阅读(1118) 评论(0) 推荐(1) 编辑
摘要: 大家好,我是独孤风,一位曾经的港口煤炭工人,目前在某国企任大数据负责人,公众号大数据流动主理人。 在最近的两年的时间里,因为公司的需求,还有大数据的发展趋势所在,我开始学习数据治理的相关知识。 随着互联网热潮的退去,互联网开始由消费互联网向产业互联网转移。这也让大数据开始在传统企业发挥作用。目前数据 阅读全文
posted @ 2023-07-10 09:43 独孤风 阅读(198) 评论(1) 推荐(0) 编辑
上一页 1 2 3 4 5 6 ··· 24 下一页