2015年10月7日

【转载】Spark SQL 1.3.0 DataFrame介绍、使用

摘要： http://www.aboutyun.com/forum.php?mod=viewthread&tid=12358&page=11.DataFrame是什么？2.如何创建DataFrame?3.如何将普通RDD转变为DataFrame？4.如何使用DataFrame？5.在1.3.0中，提供了哪些... 阅读全文

posted @ 2015-10-07 19:38 白乔 阅读(516) 评论(0) 推荐(0) 编辑

SparkSQL之数据源

摘要： 准备json文件：cat /root/1.json{"name":"Michael"}{"name":"Andy", "age":30}{"name":"Justin", "age":19}可以尝试传统方法：val people = sqlContext.read.json("fil... 阅读全文

posted @ 2015-10-07 18:40 白乔 阅读(188) 评论(0) 推荐(0) 编辑

导航