摘要：
一、前述 Action类算子也是一类算子（函数）叫做行动算子，如foreach,collect，count等。Transformations类算子是延迟执行，Action类算子是触发执行。一个application应用程序（就是我们编写的一个应用程序）中有几个Action类算子执行，就有几个job运 阅读全文
posted @ 2018-02-02 00:32
L先生AI课堂
阅读(10349)
评论(0)
推荐(0)
摘要：
一、前述 Spark中控制算子也是懒执行的，需要Action算子触发才能执行，主要是为了对数据进行缓存。 控制算子有三种，cache,persist,checkpoint，以上算子都可以将RDD持久化，持久化的单位是partition。cache和persist都是懒执行的。必须有一个action类 阅读全文
posted @ 2018-02-02 00:13
L先生AI课堂
阅读(2154)
评论(0)
推荐(0)
浙公网安备 33010602011771号