大数据技术之Scala
======第一篇:Scala编程语言=====
Scala语言的函数式编程*(一)
举例:
WordCount
var result=sc.textFile(“hdfs://***********”).FlatMap(_.split(“ ”)).map((_,1)).reduceByKey(_+_).collect()
一、Scala中的函数
在Scala中,函数是“头等公民”,就和数字一样。可以在变量中存放函数,即:将函数作为变量的值(值函数)。
二、匿名函数
map的含义:
把每一个Array(1,2,3)中的每一个元素,作为x的参数值,传递给map函数。
说明:
(x:Int)=>x*3简写成_*3
对于:(_,1)
(x:Int)=>(x,1)就是将等号前面的都省略(包括=>),然后再将(x,1)中的x变成下划线进行表示。
三、带函数参数的函数,即:高阶函数
示例1:
(1)首先,定义一个最普通的函数
(2)再定义一个高阶函数
(3)分析这个高阶函数调用的过程
示例2:
在这个例子中,首先定义了一个普通的函数mytest,然后定义了一个高阶函数myFunction;myFunction接收三个参数:第一个f是一个函数参数,第二个是x,第三个是y。而f是一个函数参数,本身接收两个Int的参数,返回一个Int的值。