摘要: Spark SQL学习笔记 Spark SQL学习笔记设计到很多代码操作,所以就放在 "github" , "https://github.com/yangtong123/RoadOfStudySpark/blob/master/src/com/spark/sql/Readme.md" 其中包括了对 阅读全文
posted @ 2017-07-10 15:34 杨同不爱吃洋葱 阅读(199) 评论(0) 推荐(0) 编辑
摘要: Spark Shuffle分析 目录 "Shuffle简介" "Shuffle写操作" "Shuffle读操作" Shuffle简介 在Hadoop中的MapReduce框架中,Shuffle是连接Map和Reduce的桥梁,Map的输出到Reduce中必须经过Shuffle这个环节。由于Shuff 阅读全文
posted @ 2017-07-10 14:55 杨同不爱吃洋葱 阅读(587) 评论(0) 推荐(0) 编辑