Jayson

老牛亦解韶光贵,不等扬鞭自奋蹄。

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2017年9月3日

摘要: tar -c: 建立压缩档案-x:解压-t:查看内容-r:向压缩归档文件末尾追加文件-u:更新原压缩包中的文件 这五个是独立的命令,压缩解压都要用到其中一个,可以和别的命令连用但只能用其中一个。下面的参数是根据需要在压缩或解压档案时可选的。 -z:有gzip属性的-j:有bz2属性的-Z:有comp 阅读全文
posted @ 2017-09-03 15:02 jaysoncho 阅读(615) 评论(0) 推荐(0)

摘要: 一.shell脚本中的相关配置 -input : 指定作业的输入文件的HDFS路径, 支持使用*通配符, 支持指定多个文件或目录, 可多次使用 -output : 指定作业的输出文件的HDFS路径, 输出目录不能存在, 执行作业的用户必须有创建该目录的权限, 只能使用一次 -mapper : 自己写 阅读全文
posted @ 2017-09-03 13:16 jaysoncho 阅读(274) 评论(0) 推荐(0)

摘要: 简单的WordCount栗子--类似于编程语言中的hello world 1.shell脚本run.sh 2.map.py 3.red.py 启动hadoop集群后, 运行shell脚本: 以下是Tracking URL中的部分内容: 查看输出到hdfs的目录/output 运行以下命令查看结果中排 阅读全文
posted @ 2017-09-03 11:54 jaysoncho 阅读(342) 评论(0) 推荐(0)