摘要: Spark默认采用Java的序列化器,这里建议采用Kryo序列化提高性能。实测性能最高甚至提高一倍。 Spark之所以不默认使用Kryo序列化,可能的原因是需要对类进行注册。 Java程序中注册很简单: 阅读全文
posted @ 2016-12-19 21:52 蓝鲸王子 阅读(3470) 评论(0) 推荐(0) 编辑
只有注册用户登录后才能阅读该文。 阅读全文
posted @ 2016-12-19 15:09 蓝鲸王子 阅读(174) 评论(0) 推荐(1) 编辑