文章分类 -  linux

摘要:偶尔还是需要使用streaming进行一些数据的统计与分析。这里做一些小笔记,便于实时的进行查询使用。 1、.hadoop streaming运行命令 /home/work/hadoop-client/hadoop/bin/hadoopstreaming \ -Dmapred.job.name="r 阅读全文
posted @ 2019-06-25 11:49 mxp_neu 阅读(199) 评论(0) 推荐(0)
摘要:转自:https://blog.csdn.net/hll19950830/article/details/79810540 1. 查看hdfs根目录下的文件:hadoop fs -ls hdfs://master:9000/ 可以简写为以下的形式:hadoop fs -ls / 或者这么写:hdfs 阅读全文
posted @ 2019-03-18 10:21 mxp_neu 阅读(1345) 评论(0) 推荐(0)
摘要:转载:http://www.ansen.org/point-in-the-shell-command-and-the-difference-of-the-source-command.html 1 shell脚本执行方法 有两种方法执行shell scripts,一种是新产生一个shell,然后执行 阅读全文
posted @ 2017-12-29 11:31 mxp_neu 阅读(776) 评论(0) 推荐(0)
摘要:转自:http://blog.51cto.com/iter2012/1613696 1. 关于文件和目录 -f 判断某普通文件是否存在 -d 判断某目录是否存在 -b 判断某文件是否块设备 -c 判断某文件是否字符设备 -S 判断某文件是否socket(待修正) -L 判断某文件是否为符号链接(待修 阅读全文
posted @ 2017-12-29 11:25 mxp_neu 阅读(485) 评论(0) 推荐(0)