随笔分类 -  hadoop

摘要：假设Hadoop已经成功安装。实验环境如下：centos 6.4hadoop-0.20.2hbase-0.90.5用户名roothadoop安装目录：/root/bin/hadoop-0.20.2hbase计划安装目录：/root/bin/hbase-0.90.5大致过程为：首先在masternode上安装hbase，配置好后再拷贝至slave机器。（1）下载hbase-0.90.5.tar.gz，解压到/root/bin/hbase-0.90.5（2）编辑/root/bin/hbase-0.90.5/conf/hbase-env.sh，编辑后如下所示，带颜色的部分为修改部分：### Set 阅读全文

摘要：org.apache.hadoop.security.AccessControlException: Permission denied: user=xxj, access=WRITE, inode="user":hadoop:supergroup:rwxr-xr-xsulution：added this entry to conf/hdfs-site.xmldfs.permissionsfalse 阅读全文

摘要：hadoop-0.20.2自带的eclipse插件是不支持eclipse-3.5以上的，要想让它支持3.5以上就必须重新编译eclipse插件。首先先修改 hadoop-0.20.2\src\contrib\eclipse-plugin\src\java\org\apache\hadoop\eclipse\launch\HadoopApplicationLaunchShortcut.javaJava代码//importorg.eclipse.jdt.internal.debug.ui.launcher.JavaApplicationLaunchShortcut;importorg.eclips 阅读全文

摘要：最近在学习Hadoop，于是想使用VMWare建立一个虚拟的集群环境。网上有很多参考资料，但参照其步骤进行设置时却还是遇到了不少问题，所以在这里详细写一下我的配置过程，以及其中遇到的问题及相应的解决方法。一来做个记录，二来也希望能帮到大家。目标我们要建立一个具有如下配置的集群：host nameip addressos1master192.168.224.100CentOS2slave1192.168.224.201CentOS3slave2192.168.224.202CentOS其中master为name node和job tracker节点，slaveN为data node和task t 阅读全文