2020年4月2日
spark2.0 连接mysql8.0数据库操作表数据
摘要： package operationMysql import config.conf.{sc, spark_session} import org.apache.spark.sql.DataFrame object readingMysqlOperation { def main(args: Arra 阅读全文
posted @ 2020-04-02 23:35 算法浪客 阅读(568) 评论(0) 推荐(0) 编辑
spark2.0以上 RDD 转 dataframe 及数据处理 ERROR Executor:91 - Exception in task 1.0 in stage 0.0 (TID 1) java.lang.NumberFormatException: empty String
摘要： 1、配置文件 package config import org.apache.spark.sql.SparkSession import org.apache.spark.{SparkConf, SparkContext} case object conf { private val master 阅读全文
posted @ 2020-04-02 22:33 算法浪客 阅读(3446) 评论(0) 推荐(0) 编辑