never give up

摘要： 1、《Hadoop技术内幕：深入解析Hadoop Common和HDFS》下载地址：http://download.csdn.net/detail/w397090770/6643259。 2、《Hadoop技术内幕：深入解析MapReduce架构设计与实现原理》下载地址：http://down... 阅读全文

摘要： Hadoop是什么？Hadoop是一个开发和运行处理大规模数据的软件平台,是Appach的一个用java语言实现开源软件框架，实现在大量计算机组成的集群中对海量数据进行分布式计算.Hadoop框架中最核心设计就是：HDFS和MapReduce.HDFS提供了海量数据的存储,MapReduce提供了对... 阅读全文

摘要： Linux基本命令Linux是一个基于命令的系统,它有很多很强的命令. 但它也有桌面系统,比如KDE,Gnome等,甚至还有仿windows桌面. 但真正在Linux下面工作的人,却不喜欢这些桌面,独爱命令行. 当你学会了在命令行下工作的时候,会体会到它的强大(黑客大都在命令行下干活的). 要学好使... 阅读全文

摘要： 在HADOOP中使用MRUNIT进行单元测试前提1. 了解JUnit4.x的使用。2. 了解Mock的概念在单元测试中的应用。3. 了解Hadoop中MapReduce的编程模型。如果您对Junit和Mock不了解，可以先阅读[翻译]Unit testing with JUnit 4.x and E... 阅读全文

摘要： 错误[root@hadoop test]# hadoop jar hadoop.jarcom.hadoop.hdfs.CopyToHDFS14/01/26 10:20:00 WARN hdfs.DFSClient: DataStreamerException: org.apache.hadoop.i... 阅读全文

摘要： 错误[root@hadoop test]# hadoop jar hadoop.jarcom.hadoop.hdfs.CopyToHDFS14/01/26 10:20:00 WARN hdfs.DFSClient: DataStreamerException: org.apache.hadoop.i... 阅读全文

摘要： 一、 Hadoop伪分布配置 首先应该现在profile文件添加hadoop_home操作如下：export JAVA_HOME=/usr/java/jdkexport HADOOP_HOME=/usr/java/hadoopexport PATH=.:$JAVA_HOME/bin:$HAD... 阅读全文

摘要： 一、 Hadoop伪分布配置 首先应该现在profile文件添加hadoop_home操作如下：export JAVA_HOME=/usr/java/jdkexport HADOOP_HOME=/usr/java/hadoopexport PATH=.:$JAVA_HOME/bin:$HAD... 阅读全文

摘要： 下面的解决方案我亲自试了没有问题；可行，但是对于初学者来说肯定会有一个疑问；这个.bash_profile文件到底在哪呢；其实很简单：当前用户的.bash_profile在/home/用户/下，系统的.bash_profile在/etc/skel目录下; 默认可能是隐藏的；有人会问了，隐藏的我怎... 阅读全文

摘要： 1.问题目录表：Error代码1.BadconnectiontoFS.commandaborted.exception:Calltolocalhost/127.0.0.1:882.88failedonconnectionexception:java.net.ConnectException:Conn... 阅读全文