随笔分类 -  图存储及计算

摘要:学习的资料是官网的Programming Guide 首先是GraphX的简介 GraphX是Spark中专门负责图和图并行计算的组件。 GraphX通过引入了图形概念来继承了Spark RDD:一个连接节点和边的有向图 为了支持图计算,GraphX引入了一些算子: subgraph, joinVe 阅读全文
posted @ 2018-01-26 18:22 tonglin0325 阅读(972) 评论(0) 推荐(0) 编辑
摘要:首先自己造了一份简单的社交关系的图 第一份是人物数据,id和姓名,person.txt 第二份是社交关系数据,两个人的id和社交关系,social.txt 使用SparkX和GraphStream来处理数据 可视化的结果,该图数据节点数很少,本来想尝试一份百万节点的数据,结果遇到了爆内存的问题 后来 阅读全文
posted @ 2018-01-23 23:11 tonglin0325 阅读(1613) 评论(3) 推荐(0) 编辑

点击右上角即可分享
微信分享提示