摘要:
spark常用RDD算子 - parallelize parallelize调用SparkContext 或 JavaSparkContext的 parallelize(),将一个存在的集合,变成一个RDD或JavaRDD代码示例:参数1:集合参数2:分区的个数JavaRDD<Integer> pa 阅读全文
摘要:
1 public class TestSplit { 2 public static void main(String[] args) { 3 System.out.println(" limit为0 "); 4 String a = "1,2,3,4,5,"; 5 String[] split1 阅读全文
摘要:
一、发布和订阅系统 想象成公众号,作者在公众号上写文章,读者订阅公众号看文章。 二、假如不用消息中间件,不用kafka 模拟一下,有6个J国的人,同时给6个G国的人投递东西,J国的每个人都要对应6个G国的人,而G国的每个人又要收到6个J国的人投递的东西。 那么当物件多的时候,两边都会很忙,而且会存在 阅读全文