随笔分类 -  hadoop

摘要:    (三)Streaming快速编程 1. mapper.py 2. reduce.py (四)准备文件     1. 准备好本地文件     2. 将本地文件student.dat与course.dat 上传到云梯目录 (五)设置Streaming参数并执行 (六)最后的输出:为了便于查看,你 阅读全文
posted @ 2016-03-14 22:34 开心玩数据 阅读(1722) 评论(0) 推荐(0)
摘要:hadoop fs -ls /列出目录及文件信息hadoop fs -lsr /循环列出目录、子目录及文件信息hadoop fs -put test.txt /user/sunlightcs将本地文件系统的test.txt复制到HDFS文件系统的/user/sunlightcs目录下hadoop f... 阅读全文
posted @ 2015-10-10 22:45 开心玩数据 阅读(428) 评论(0) 推荐(0)