11 2015 档案

Scala学习之for 循环和 yield 的例子
摘要：for循环中的 yield 会把当前的元素记下来，保存在集合中，循环结束后将返回该集合。Scala中for循环是有返回值的。如果被循环的是Map，返回的就是Map，被循环的是List，返回的就是List，以此类推。例1：1 scala> for (i for (i for (i val a... 阅读全文
posted @ 2015-11-21 15:38 天~宇~翱~翔 阅读(23433) 评论(0) 推荐(2) 编辑
Spark学习之RDD的理解
摘要：转自：http://www.infoq.com/cn/articles/spark-core-rdd/感谢张逸老师的无私分享 RDD，全称为Resilient Distributed Datasets，是一个容错的、并行的数据结构，可以让用户显式地将数据存储到磁盘和内存中，并能控制数据的分区。同时... 阅读全文
posted @ 2015-11-02 00:19 天~宇~翱~翔 阅读(389) 评论(0) 推荐(0) 编辑
Hadoop学习之shuffle过程
摘要：转自：http://langyu.iteye.com/blog/992916，多谢分享，学习Hadopp性能调优的可以多关注一下Shuffle过程是MapReduce的核心，也被称为奇迹发生的地方，Shuffle的正常意思是洗牌或弄乱，可能大家更熟悉的是Java API里的Collections.s... 阅读全文
posted @ 2015-11-01 21:01 天~宇~翱~翔 阅读(5276) 评论(0) 推荐(2) 编辑

点击右上角即可分享
微信分享提示