随笔分类 -  大数据学习笔记

大数据学习踩坑之 HADOOP_HOME and hadoop.home.dir are unset.
摘要：问题描述： java.io.FileNotFoundException: HADOOP_HOME and hadoop.home.dir are unset. at org.apache.hadoop.util.Shell.checkHadoopHomeInner(Shell.java:448) a 阅读全文
posted @ 2021-02-08 12:52 yucreator 阅读(8188) 评论(1) 推荐(3)
Hadoop3.2.0的mapred-site.xml配置(3.X以后的都要这么配)
摘要：**修改mapred-site.xml，配置使用yarn框架执行mapreduce处理程序，与之前版本多了后面两部** **不配置mapreduce.application.classpath这个参数mapreduce运行时会报错：** **Error: Could not find or load 阅读全文
posted @ 2021-02-06 00:22 yucreator 阅读(1414) 评论(0) 推荐(0)
CentOs7中修改环境变量之后必须重新加载才能生效
摘要：CentOs7中遇到的坑总结如下： #### 1. 修改环境变量 /etc/profile 文件之后必须重新加载该文件修改后的结果才能生效，否则无效 source /etc/profile 阅读全文
posted @ 2021-02-04 21:51 yucreator 阅读(1373) 评论(0) 推荐(0)