摘要: sqprk集群上使用自定义udf函数,出现无法序列化的错误 在spark集群上,将读取到的csv文件生成的datafream,需要对其中一列进行转化,内置的udf函数已经不能满足需求 所以需要自定义一个udf,但是在使用的时候报错,如下 Exception in thread "main" org.apache.spark.SparkException: T 阅读全文
posted @ 2021-09-07 11:25 Mr·Li程序员 阅读(456) 评论(0) 推荐(0) 编辑