2015年9月15日
hadoop三个配置文件的参数含义说明core-site.xml,hdfs-site.xml,mapred-site.xml
摘要： 配置hadoop，主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件，默认下来，这些配置文件都是空的，所以很难知道这些配置文件有哪些配置可以生效，上网找的配置可能因为各个hadoop版本不同，导致无法生效。浏览更多的配置，有两个方法:1.选择... 阅读全文
posted @ 2015-09-15 21:58 子健儿 阅读(1115) 评论(0) 推荐(0)
Hadoop中的一些基本操作
摘要： 先粗略说一下“hadoop fs”和“hadoop dfs”的区别：fs是各比较抽象的层面，在分布式环境中，fs就是dfs，但在本地环境中，fs是local file system，这个时候dfs不可用。1、列出HDFS文件：?1hadoopfs–lsa) –ls后面不跟任何内容的话是列出HDFS的... 阅读全文
posted @ 2015-09-15 19:47 子健儿 阅读(5314) 评论(0) 推荐(0)
何时使用hadoop fs、hadoop dfs与hdfs dfs命令
摘要： hadoop fs：使用面最广，可以操作任何文件系统。hadoop dfs与hdfs dfs：只能操作HDFS文件系统相关（包括与Local FS间的操作），前者已经Deprecated，一般使用后者。以下内容参考自stackoverflowFollowing are the three comma... 阅读全文
posted @ 2015-09-15 19:35 子健儿 阅读(469) 评论(0) 推荐(0)