05 2019 档案

摘要:总结下Spark中将RDD转换成DataFrame的两种方法, 代码如下: 方法一: 使用 方法 方法二: 使用 方法 注意 请不要将 定义在main 方法中与toDF一起使用,或与使用toDF定义在同一函数中 阅读全文
posted @ 2019-05-17 21:45 LestatZ 阅读(2561) 评论(0) 推荐(0)
摘要:@ "TOC" 前言 这个伴生类主要功能是创建/配置ApplicationMaster的应用程序,,准备相关的环境与资源。 Github源码地址:https://github.com/apache/spark/blob/master/resource managers/yarn/src/main/s 阅读全文
posted @ 2019-05-05 12:48 LestatZ 阅读(1724) 评论(0) 推荐(0)