2020年6月10日
spark RDD pipe 调用外部脚本
摘要： pipe(command, [envVars])对于每个分区，都执行一个perl或者shell脚本，返回输出的RDD 1234567891011 scala> val rdd = sc.makeRDD(List("wangguo","yangxiu","xiaozhou","kangkang"),3 阅读全文
posted @ 2020-06-10 21:40 bonelee 阅读(1629) 评论(0) 推荐(0) 编辑