百里登风

导航

2017年8月16日

hadoop hdfs常用命令

摘要： hadoop hdfs常用命令 hadoop常用命令： hadoop fs 查看Hadoop HDFS支持的所有命令 hadoop fs –ls 列出目录及文件信息 hadoop fs –lsr 循环列出目录、子目录及文件信息 hadoop fs –put test.txt /user/sunlig 阅读全文

posted @ 2017-08-16 21:27 百里登峰 阅读(279) 评论(0) 推荐(0)

Spark standalone运行模式

摘要： Spark Standalone 部署配置 Standalone架构 手工启动一个Spark集群 https://spark.apache.org/docs/latest/spark-standalone.html 通过脚本启动集群 编辑slaves,其实把worker所在节点添加进去 配置spar 阅读全文

posted @ 2017-08-16 20:27 百里登峰 阅读(941) 评论(0) 推荐(0)