2019年12月15日
大数据学习day24-------spark07-----1. sortBy是Transformation算子，为什么会触发Action 2. SparkSQL 3. DataFrame的创建 4. DSL风格API语法 5 两种风格（SQL、DSL）计算workcount案例
摘要： 1. sortBy是Transformation算子，为什么会触发Action sortBy需要对数据进行全局排序，其需要用到RangePartitioner，而在创建RangePartitioner时需要大概知道有多少数据，以及数据的范围（采样），其内部获取这个范围（rangeBounds）是通过 阅读全文
posted @ 2019-12-15 17:33 一y样 阅读(620) 评论(0) 推荐(0)