2021年7月27日
小记--------Ambari2.7.4集成Kylin3.0
摘要： Ambari2.7.4集成Kylin3.0 1.准备工作 1.组件 Ambari 2.7.4 HDP 3.1.4 Kylin apache-kylin-3.0.1-bin-hadoop3.tar.gz nginx 1.8.1 hdp-3.0-kylin-2.6.0 2. 安装包自取百度云 链接：ht 阅读全文
posted @ 2021-07-27 23:32 于二黑 阅读(270) 评论(0) 推荐(0) 编辑
记一次--------HDP3.1 spark创建表hive读不到，hive创建表spark读不到
摘要： 1.修改spark配置： Advanced spark2-defaults spark.sql.warehouse.dir 值/apps/spark/warehouse 改为hive数据存储hdfs位置：/user/hive/warehouse Advanced spark2-hive-site-o 阅读全文
posted @ 2021-07-27 23:30 于二黑 阅读(447) 评论(0) 推荐(0) 编辑
记一次-------- sqoop同步mysql到hive 执行太慢
摘要： 记一次 sqoop同步mysql到hive 执行太慢 背景： Ambari2.7.4管理的HDP3.1.4版本。 查看yarn日志，发现有报错，但是程序还是执行完成了， 报错内容如下： 2021-04-14 17:29:40,131 ERROR [Job ATS Event Dispatcher] 阅读全文
posted @ 2021-07-27 23:29 于二黑 阅读(691) 评论(0) 推荐(0) 编辑
记一次--------hive创建表comment中文乱码解决
摘要： == ### 一、原因分析 是因为hive的元数据编码问题，hive的元数据一般存储在mysql数据库，数据库名：hive ### 二、解决 ``` 1. 进入hive库 use hive; 2.修改配置 alter table COLUMNS_V2 modify column COMMENT va 阅读全文
posted @ 2021-07-27 23:27 于二黑 阅读(400) 评论(0) 推荐(0) 编辑