2018年4月8日
摘要: 文章标题 Apache Spark as a Compiler: Joining a Billion Rows per Second on a Laptop Deep dive into the new Tungsten execution engine 作者介绍 Sameer Agarwal, D 阅读全文
posted @ 2018-04-08 21:20 虾皮 阅读(561) 评论(0) 推荐(0) 编辑
摘要: 文章标题 Deep Dive into Spark SQL’s Catalyst Optimizer 作者介绍 Michael Armbrust, Yin Huai, Cheng Liang, Reynold Xin and Matei Zaharia 文章正文 参考文献 https://datab 阅读全文
posted @ 2018-04-08 21:17 虾皮 阅读(603) 评论(0) 推荐(0) 编辑
摘要: 文章标题 What’s new for Spark SQL in Apache Spark 1.3 作者介绍 Michael Armbrust 文章正文 The Apache Spark 1.3 release represents a major milestone for Spark SQL. 阅读全文
posted @ 2018-04-08 21:12 虾皮 阅读(470) 评论(0) 推荐(0) 编辑
摘要: 文章正文 通过隐式转换,程序员可以在编写Scala程序时故意漏掉一些信息,让编译器去尝试在编译期间自动推导出这些信息来,这种特性可以极大的减少代码量,忽略那些冗长,过于细节的代码。 1、Spark 中的隐式思考 隐式转换是Scala的一大特性, 如果对其不是很了解, 在阅读Spark代码时候就会很迷 阅读全文
posted @ 2018-04-08 16:47 虾皮 阅读(35210) 评论(7) 推荐(16) 编辑