随笔分类 -  Hive

spark 异常:ClassCastException: Text cannot be cast to org.apache.hadoop.hive.ql.io.orc.OrcSerde$OrcSerdeRow
摘要：最近在执行Hive insert/select语句的过程碰到下面这种类型的异常： 异常1： Caused by: java.lang.ClassCastException: org.apache.hadoop.io.Text cannot be cast to org.apache.hadoop.h 阅读全文
posted @ 2022-02-07 15:02 数大招疯-公众号同名 阅读(2089) 评论(0) 推荐(0)
02 Hive支持的数据类型（ Data Type）
摘要：Hive支持简单、复杂两大类数据类型， 简单类型 Hive 简单数据类型 Java 数据类型 长度 例子 TINYINT byte 1byte 有符号整数 20 SMALINT short 2byte 有符号整数 20 INT int 4byte 有符号整数 20 BIGINT long 8byte 阅读全文
posted @ 2021-02-19 20:07 数大招疯-公众号同名 阅读(687) 评论(0) 推荐(0)
01 Hive简介、架构、及安装部署模式
摘要：简介 Hive是一个数据仓库基础工具，提供sql查询，并可以将sql语句转换为MapReduce、Tez、Spark等任务，用来处理Hadoop HDFS中的数据，使得查询和分析更加方便。除此外，Hive还讲HDFS上的数据转换为了有行和列的二维表，并提供了统一的元数据管理功能。 架构 如上所述，H 阅读全文
posted @ 2021-02-06 22:07 数大招疯-公众号同名 阅读(646) 评论(0) 推荐(0)
一文了解大数据技术
摘要：由于大数据的4V等特性，给传统数据技术也带来了较大的挑战，一般将解决这些挑战的技术称为大数据技术。 阅读全文
posted @ 2021-01-26 21:11 数大招疯-公众号同名 阅读(926) 评论(0) 推荐(0)
常用大数据技术分类
摘要：最全分类，欢迎评论补充 阅读全文
posted @ 2021-01-26 21:09 数大招疯-公众号同名 阅读(257) 评论(0) 推荐(0)