2018年6月26日

摘要: Spark 的两个共享变量:累加器(accumulator)与广播变量(broadcast variable)。 累加器用来对信息进行聚合,而广播变量用来高效分发较大的对象。 在Scala 中累加空行: scala> val testrdd=sc.textFile("hdfs://localhost 阅读全文

posted @ 2018-06-26 16:14 打杂滴 阅读(150) 评论(0) 推荐(0) 编辑


Copyright © 2024 打杂滴
Powered by .NET 8.0 on Kubernetes