2018年12月18日
Linux安装JDK
摘要： 需要：JDK1.8 1.使用Xftp上传jdk的免安装包到3台虚拟机的指定目录下： 2.配置JDK环境变量 执行命令：vi /etc/profile，在文件末尾追加： 然后执行命令：source /etc/profile ，使修改立即生效 检查是否配置成功，执行命令：java -version 表示 阅读全文
posted @ 2018-12-18 22:02 云山之巅 阅读(325) 评论(0) 推荐(0)
Spark常用算子解析及代码实战
摘要： Spark 一.coalesce 1.简介 coalesce常用来合并分区，第二个参数是合并分区时是否产生shuffle。true为产生shuffle，false为不产生shuffle。默认是false不产生shuffle。如果coalesce设置的分区数比原来的分区数还大的话若设置为false则不 阅读全文
posted @ 2018-12-18 17:00 云山之巅 阅读(632) 评论(0) 推荐(0)