2018年3月14日
spark2.1注册内部函数spark.udf.register("xx", xxx _)，运行时抛出异常：Task not serializable
摘要： 函数代码： 使用spark-submit提交函数时，抛出异常： 解决方案： 把当前MySparkJob集成Serializable 阅读全文
posted @ 2018-03-14 23:24 cctext 阅读(3862) 评论(1) 推荐(0)
spark2.1操作json（save/read）
摘要： 建筑物配置信息： 向hdfs写入json文件： 从hdfs中读取json文件： 阅读全文
posted @ 2018-03-14 00:41 cctext 阅读(2051) 评论(0) 推荐(0)