2019年3月5日
Pyspark 使用 Spark Udf 的一些经验
摘要： 起初开始写一些 udf 的时候感觉有一些奇怪，在 spark 的计算中，一般通过转换(Transformation) 在不触发计算(Action) 的情况下就行一些预处理。udf 就是这样一个好用的东西，他可以在我们进行 Transformation 的时候给我们带来对复杂问题的处理能力。 这里有两 阅读全文
posted @ 2019-03-05 15:26 piperck 阅读(14743) 评论(0) 推荐(0) 编辑