会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
大数据技术与数仓
公众号『大数据技术与数仓』
博客园
首页
新随笔
联系
订阅
管理
2021年1月5日
Flink on Hive构建流批一体数仓
摘要: Flink使用HiveCatalog可以通过批或者流的方式来处理Hive中的表。这就意味着Flink既可以作为Hive的一个批处理引...
阅读全文
posted @ 2021-01-05 21:14 大数据技术与数仓
阅读(2293)
评论(1)
推荐(0)
2020年12月22日
Flink集成Hive之Hive Catalog与Hive Dialect--以Flink1.12
摘要: 在上一篇分享Flink集成Hive之快速入门–以Flink1.12为例中,介绍了Flink集成Hive的进本步骤。本文分享,将继续介...
阅读全文
posted @ 2020-12-22 09:43 大数据技术与数仓
阅读(5065)
评论(0)
推荐(0)
2020年12月21日
Flink集成Hive之快速入门--以Flink1.12为例
摘要: 使用Hive构建数据仓库已经成为了比较普遍的一种解决方案。目前,一些比较常见的大数据处理引擎,都无一例外兼容Hive。Flink从1...
阅读全文
posted @ 2020-12-21 09:37 大数据技术与数仓
阅读(2352)
评论(0)
推荐(0)
2020年11月24日
数仓开发需要了解的5大SQL分析函数
摘要: 公众号『大数据技术与数仓』,回复『资料』领取大数据资料包 基本语法 analytic_function_name([argum...
阅读全文
posted @ 2020-11-24 13:56 大数据技术与数仓
阅读(226)
评论(0)
推荐(0)
2020年11月23日
第十一篇|基于SparkSQL的电影分析项目实战
摘要: 在之前的分享中,曾系统地介绍了Spark的基本原理和使用方式,感兴趣的可以翻看之前的分享文章。在本篇分享中,将介绍一个完整的项目案例...
阅读全文
posted @ 2020-11-23 13:29 大数据技术与数仓
阅读(1200)
评论(0)
推荐(0)
2020年11月18日
篇五|ClickHouse数据导入(Flink、Spark、Kafka、MySQL、Hive)
摘要: 本文分享主要是ClickHouse的数据导入方式,本文主要介绍如何使用Flink、Spark、Kafka、MySQL、Hive将数据...
阅读全文
posted @ 2020-11-18 10:18 大数据技术与数仓
阅读(7553)
评论(0)
推荐(2)
2020年11月12日
第十篇SparkStreaming手动维护Kafka Offset的几种方式
摘要: Spark Streaming No Receivers 方式的createDirectStream 方法不使用接收器,而是创建输入...
阅读全文
posted @ 2020-11-12 17:04 大数据技术与数仓
阅读(261)
评论(0)
推荐(0)
2020年11月3日
Spark的五种JOIN策略解析
摘要: JOIN操作是非常常见的数据处理操作,Spark作为一个统一的大数据处理引擎,提供了非常丰富的JOIN场景。本文分享将介绍Spark...
阅读全文
posted @ 2020-11-03 22:17 大数据技术与数仓
阅读(5081)
评论(0)
推荐(4)
2020年10月26日
篇四|ClickHouse的可视化界面与集群状态监控
摘要: 介绍 tabix支持通过浏览器直接连接 ClickHouse,不需要安装其他软件,就可以访问ClickHouse,具有以下特点: ⾼...
阅读全文
posted @ 2020-10-26 10:10 大数据技术与数仓
阅读(1474)
评论(0)
推荐(0)
2020年10月14日
篇三|ClickHouse的数据类型
摘要: ClickHouse提供了许多数据类型,它们可以划分为基础类型、复合类型和特殊类型。我们可以在system.data_type_fa...
阅读全文
posted @ 2020-10-14 21:32 大数据技术与数仓
阅读(2950)
评论(0)
推荐(0)
下一页
公告