10 2020 档案

cdh6.3.2的启停
摘要：参考链接：https://www.cnblogs.com/crazysquirrel/p/7522312.html 哥们别急，看看我接下来说的， 停止： 1. 关闭集群所有组件 按照他那个就行 2. 关闭Cloudera Management Service 按照他那个就行 3. 关闭cdh所有客户 阅读全文
posted @ 2020-10-21 18:55 Mrzxs 阅读(857) 评论(0) 推荐(0)
运行flink程序出现：ERROR: A JNI error has occurred, pLease check your installation and try again
摘要：前提：如果你的错误，不是在运行flink的时候出错，那么就不要看了 错误： 在运行flink程序时，出现ERROR：A JNI error has occurred, pLease check your installation and try again 分析： 让你检查安装，然后再使一次。那么就 阅读全文
posted @ 2020-10-11 11:53 Mrzxs 阅读(2964) 评论(0) 推荐(0)
各Flume的source、channel、sink解析和实例用法
摘要：常用：去官网一顿撸，有很多哦 最右侧有目录导航哟 >>>>>>>> 一、Source: avro 多用于复制(a1.sources.r1.selector.type = replicating)、多路复用(a1.sources.r1.selector.type = multiplexing)、负载均 阅读全文
posted @ 2020-10-09 16:49 Mrzxs 阅读(2394) 评论(0) 推荐(0)
HIVE报错：Error: Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask (state=08S01,code=2)
摘要：执行 insert into table video_orc select * from video_ori;时报错 查看hive日志发现具体报错信息如下： 2020-10-07T09:33:11,117 INFO [HiveServer2-Background-Pool: Thread-241] 阅读全文
posted @ 2020-10-07 14:57 Mrzxs 阅读(15421) 评论(1) 推荐(0)
hadoop3.1.3web页面中创建文件夹或者删除文件夹等出现权限拒绝问题
摘要：一、分析 我在浏览器创建目录和删除目录及文件，为什么会是dr.who，dr.who其实是hadoop中http访问的静态用户名，并没有啥特殊含义，可以在core-default.xml中看到其配置 hadoop.http.staticuser.user=dr.who 我们可以通过修改core-sit 阅读全文
posted @ 2020-10-07 11:53 Mrzxs 阅读(1976) 评论(0) 推荐(0)
Hive自定义UDF、UDAF、UDTF函数
摘要：持续更新中： Java端： 1. UDF（一进一出） 1）创建一个Maven工程 2）导入依赖（hive版本是3.1.2） <dependencies> <!-- https://mvnrepository.com/artifact/org.apache.hive/hive-exec --> <de 阅读全文
posted @ 2020-10-05 21:26 Mrzxs 阅读(450) 评论(0) 推荐(0)