2019年4月11日
spark保存数据到hdfsJ及hive
摘要： package spark88 import org.apache.spark.sql.{DataFrame, Row, SQLContext, SaveMode}import org.apache.spark.sql.hive.HiveContextimport org.apache.spark. 阅读全文
posted @ 2019-04-11 17:24 何国秀_xue 阅读(1848) 评论(0) 推荐(0) 编辑
spark小文件合并
摘要： package spark99 import java.io.IOException import org.apache.hadoop.fs.{FileSystem, Path}import org.apache.log4j.Loggerimport org.apache.spark.sql.hiv 阅读全文
posted @ 2019-04-11 17:23 何国秀_xue 阅读(3353) 评论(0) 推荐(0) 编辑