随笔分类 -  Spark

摘要：fastutil介绍 fastutil是扩展了Java标准集合框架（Map、List、Set；HashMap、ArrayList、HashSet）的类库，提供了特殊类型的map、set、list和queue； fastutil能够提供更小的内存占用，更快的存取速度；我们使用fastutil提供的集合 阅读全文

摘要：今天使用Java+Spark 实现 flatMapToPair 的lambda函数，代码如下： 结果报错： 上网查了下原因，是因为spark 2.0以上要求返回一个Iterator的实例。 于是修改代码如下(标红)，错误就消失了。 记录一下，备忘。 参考：http://blog.csdn.net/t 阅读全文