drl_blogs

摘要： 1.打开settings界面2.找到code completion3.Math case去掉勾阅读全文

posted @ 2019-06-20 11:20 drl_blogs 阅读(1759) 评论(0) 推荐(0)

摘要： 1.8 1.8 2.11.8 2.2.2 2.7.3 8.0.11 ... 阅读全文

posted @ 2019-06-19 23:17 drl_blogs 阅读(1541) 评论(0) 推荐(0)

摘要：文章目录RDD转DataFrames方式一：直接指定列名和数据类型方式二：通过反射转换方式三：通过编程设置Schema（StructType）RDD转DataSetDataFr... 阅读全文

posted @ 2019-06-19 16:55 drl_blogs 阅读(2055) 评论(0) 推荐(0)

摘要：文章目录json文件中数据DataFrames创建DataFramesDSL风格printSchemaselectfiltergroupBySQL风格createOrRepla... 阅读全文

posted @ 2019-06-19 16:55 drl_blogs 阅读(1602) 评论(0) 推荐(0)

摘要： [root@hadoop01 redis-3.0.0]# makecd src && make allmake[1]: Entering directory `/usr/loc... 阅读全文

posted @ 2019-06-19 16:55 drl_blogs 阅读(3344) 评论(0) 推荐(0)

摘要：文章目录文本文件输入输出读取文本文件保存文本文件JSON/CSV文件输入输出SequenceFile文件输入输出保存SequenceFile文件查看SequenceFile文件... 阅读全文

posted @ 2019-06-19 16:54 drl_blogs 阅读(361) 评论(0) 推荐(0)

摘要： Transformation操作目录map[U: ClassTag](f: T => U): RDD[U]filter(f: T => Boolean): RDD[T]flat... 阅读全文

posted @ 2019-06-19 16:54 drl_blogs 阅读(525) 评论(0) 推荐(0)

摘要： Action目录reduce(f: (T, T) => T): Tcollect(): Array[T]count(): Longfirst(): Ttake(num: Int... 阅读全文

posted @ 2019-06-19 16:54 drl_blogs 阅读(154) 评论(0) 推荐(0)

摘要： #方式一：把数据并行化分片到节点sc.parallelize(Array(1,2,3,4))#方式二：把数据并行化分片到节点sc.makeRDD(Array(1,2,3))#方... 阅读全文

posted @ 2019-06-17 16:35 drl_blogs 阅读(169) 评论(0) 推荐(0)

摘要：由于分栏中的分类中没有文章前台不显示，本文就是为了让其显示的分隔符阅读全文

posted @ 2019-06-17 15:20 drl_blogs 阅读(146) 评论(0) 推荐(0)