2016年4月23日

16.RDD实战
摘要： 第16课:RDD实战 由于RDD的不可修改的特性，导致RDD的操作与正常面向对象的操作不同，RDD的操作基本分为3大类：transformation，action，contoller 1. Transformation Transformation是通过转化针对已有的RDD创建出新的RDD map( 阅读全文
posted @ 2016-04-23 15:39 听风居士 阅读(568) 评论(0) 推荐(0) 编辑
15.RDD 创建内幕解析
摘要： 第15课：RDD创建内幕 Spark应用程序运行过程中，第一个RDD代表了Spark应用程序输入数据的来源，之后通过Trasformation来对RDD进行各种算子的转换，来实现具体的算法 Spark中的基本方式： 1) 使用程序中的集合创建 这种方式的实际意义主要用于测试。 2) 使用本地文件系统 阅读全文
posted @ 2016-04-23 10:59 听风居士 阅读(561) 评论(0) 推荐(0) 编辑

导航