摘要: Spark对很多种文件格式的读取和保存方式都很简单。Spark会根据文件扩展名选择对应的处理方式。 Spark支持的一些常见文件格式如下: 文本文件 使用文件路径作为参数调用SparkContext中的textFile()函数,就可以读取一个文本文件。也可以指定minPartitions控制分区数。 阅读全文
posted @ 2017-09-16 22:48 Easen.Cai 阅读(17077) 评论(0) 推荐(0) 编辑