2019年2月25日
大数据基础之Spark（9）spark部署方式yarn/mesos
摘要： 1 下载解压 https://spark.apache.org/downloads.html $ wget http://mirrors.shu.edu.cn/apache/spark/spark-2.4.0/spark-2.4.0-bin-hadoop2.7.tgz $ tar xvf spark 阅读全文
posted @ 2019-02-25 18:37 匠人先生 阅读(1037) 评论(0) 推荐(1)
大叔经验分享（33）hive select count为0
摘要： hive建表后直接将数据文件拷贝到table目录下，select * 可以查到数据，但是select count(1) 一直返回0，这个是因为hive中有个配置 hive.stats.autogather=true Enables automated gathering of table-level 阅读全文
posted @ 2019-02-25 15:51 匠人先生 阅读(3566) 评论(1) 推荐(1)
大数据基础之Hive（3）最简绿色部署
摘要： hadoop部署参考：https://www.cnblogs.com/barneywill/p/10428098.html 1 拷贝到所有服务器上并解压 # ansible all-servers -m copy -a 'src=/src/path/to/apache-hive-2.3.4-bin. 阅读全文
posted @ 2019-02-25 11:26 匠人先生 阅读(274) 评论(0) 推荐(1)
大数据基础之Hadoop（2）hdfs和yarn最简绿色部署
摘要： 环境：3结点集群 192.168.0.1192.168.0.2192.168.0.3 1 配置root用户服务期间免密登录 参考：https://www.cnblogs.com/barneywill/p/10271679.html 2 安装ansible 参考：https://www.cnblogs 阅读全文
posted @ 2019-02-25 11:14 匠人先生 阅读(330) 评论(0) 推荐(1)