2021年9月7日
sqprk集群上使用自定义udf函数，出现无法序列化的错误
摘要： sqprk集群上使用自定义udf函数，出现无法序列化的错误 在spark集群上，将读取到的csv文件生成的datafream，需要对其中一列进行转化，内置的udf函数已经不能满足需求 所以需要自定义一个udf，但是在使用的时候报错，如下 Exception in thread "main" org.apache.spark.SparkException: T 阅读全文
posted @ 2021-09-07 11:25 Mr·Li程序员 阅读(538) 评论(0) 推荐(0)