2019年6月18日
利用SparkSQL(java版)将离线数据或实时流数据写入hive的用法及坑点
摘要： 1. 通常利用SparkSQL将离线或实时流数据的SparkRDD数据写入Hive,一般有两种方法。第一种是利用org.apache.spark.sql.types.StructType和org.apache.spark.sql.types.DataTypes来映射拆分RDD的值；第二种方法是利用r 阅读全文
posted @ 2019-06-18 16:25 技术即艺术 阅读(7760) 评论(0) 推荐(0) 编辑