随笔分类 -  hadoop

hadoop命令
摘要：hadoop dfsadmin -safemode enter | leave | get | wait hive登录： [ ] hiveserver2 [ ] beeline -u jdbc:hive2://localhost:10000 阅读全文
posted @ 2019-01-08 10:19 uuhh 阅读(177) 评论(0) 推荐(0)
HadoopAPI和exlipse关系建立
摘要：HadoopAPI和exlipse关系建立 解压hadoop-2.6.5.tar.gz 然后将解压目录下的share目录下的所有Jar都复制出来到另一个lib2文件下 然后使用自己的bin目录下的内容覆盖hadoop包中Bin目录下的内容。对window进行支持。 然后把hadoop.dll放入wi 阅读全文
posted @ 2018-11-18 10:19 uuhh 阅读(330) 评论(0) 推荐(0)
hadoop maptask$ mapoutputbuffer类
摘要：Serialize the key, value to intermediate storage. * When this method returns, kvindex must refer to sufficient unused * storage to store one METADATA. 阅读全文
posted @ 2018-08-12 21:15 uuhh 阅读(283) 评论(0) 推荐(0)
hadoop搭建
摘要：伪分布式建立（已经正确实施过）： 配置export JAVA_HOME 配置export HADOOP_HOME/bin……sbin 修改hadoop-env.sh的JAVA_HOME，改成绝对路径 修改mapred-env.sh的JAVA_HOME,改成绝对路径 修改yarn-env.sh的JAV 阅读全文
posted @ 2018-08-08 10:26 uuhh 阅读(163) 评论(0) 推荐(0)
hadoop项目架构
摘要： 阅读全文
posted @ 2018-07-10 19:56 uuhh 阅读(178) 评论(0) 推荐(0)