2024年12月12日

Parquet文件格式

摘要: 随着大模型AI的进一步发展,我们需要存储和处理的数据量呈指数级增长,寻找存储各种数据风格的最佳方式依然是最大的挑战之一。 相信现在几乎已经没有人还会认为关系数据库是依然是唯一数据存储处理方式。 比如说抖音的视频和直播等信息,其原始数据通常是无法实现以传统(关系)数据库方式存储的,或者以传统方式存储它 阅读全文

posted @ 2024-12-12 16:45 ExplorerMan 阅读(129) 评论(0) 推荐(0)

Hive中高频常用的函数和语法

摘要: Hive中高频常用的函数和语法梳理及业务场景示例聚合函数collect_list - 收集列值到一个数组collect_list函数用于将指定列的值收集到一个数组中,并返回该数组作为结果。它通常在GROUP BY子句中使用,以将相同键的值收集到一个数组中进行聚合操作 以下是collect_list函 阅读全文

posted @ 2024-12-12 16:39 ExplorerMan 阅读(1103) 评论(0) 推荐(0)

Hive判空函数 COALESCE 和 NVL 使用示例

摘要: Hive判空函数 COALESCE 和 NVL 使用示例 1. 在Hive中, COALESCE 和 NVL 函数都是用于处理NULL值的函数,以下是它们的用途总结:COALESCE: COALESCE 函数用于返回参数列表中第一个非NULL的数值或表达式。语法: COALESCE(value1, 阅读全文

posted @ 2024-12-12 16:37 ExplorerMan 阅读(3170) 评论(0) 推荐(0)

导航