随笔分类 -  Spark

大数据开发
Exception in thread "main" com.mysql.jdbc.exceptions.jdbc4.MySQLNonTransientConnectionException: Client does not support authentication protocol
摘要：1. 环境：mysql 8.0.28、mysql驱动5.1.17 2. BUG描述：使用spark连接mysql出现错误 2.1 spark连接mysql语句 //TODO 创建SparkSQL的运行环境 val sparkConf = new SparkConf().setMaster("loca 阅读全文
posted @ 2022-05-09 11:17 递茶大户 阅读(138) 评论(0) 推荐(0) 编辑
Spark程序在IntelliJ IDEA中设置了log4j.properties后不起作用
摘要：1. 环境：maven 3.6.3、spark-core_2.12-3.2.1、Java1.8 2. 问题描述 2.1 设置了log4j.properties，目的是将只将运行结果和ERROR的信息打印在控制台，但不起作用 2.2 log4j.properties log4j.rootCategor 阅读全文
posted @ 2022-04-24 15:00 递茶大户 阅读(1784) 评论(0) 推荐(0) 编辑
Exception in thread "main" java.io.NotSerializableException: com.sam.bigdata.spark.core.test.Task
摘要：出现以下错误提示 Exception in thread "main" java.io.NotSerializableException: com.sam.bigdata.spark.core.test.Task at java.io.ObjectOutputStream.writeObject0( 阅读全文
posted @ 2022-04-05 14:16 递茶大户 阅读(47) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示