| | | | |

2016年7月22日

摘要： package cn.spark.study.dataFramecore import org.apache.spark.SparkConfimport org.apache.spark.SparkContextimport org.apache.spark.sql.SQLContextimport 阅读全文

posted @ 2016-07-22 15:13 呢喃的歌声阅读(234) 评论(0) 推荐(0)

spark1.5引进内置函数

摘要：在Spark 1.5.x版本，增加了一系列内置函数到DataFrame API中，并且实现了code-generation的优化。与普通的函数不同，DataFrame的函数并不会执行后立即返回一个结果值，而是返回一个Column对象，用于在并行作业中进行求值。Column可以用在DataFrame的阅读全文

posted @ 2016-07-22 00:03 呢喃的歌声阅读(355) 评论(0) 推荐(0)

2016年7月22日

公告