随笔分类 -  SparkSql

手把手教你 在IDEA搭建 SparkSQL的开发环境
摘要：1. 创建maven项目 在IDEA中添加scala插件 并添加scala的sdk https://www.cnblogs.com/bajiaotai/p/15381309.html 2. 相关依赖jar的引入 配置pom.xml 2.1 pom.xml 示例 (spark版本: 3.0.0 sca 阅读全文
posted @ 2022-05-14 18:13 学而不思则罔！ 阅读(1306) 评论(0) 推荐(0) 编辑
[报错] spark开发环境 操作hdfs 报错
摘要：报错1 22/05/0305:48:53 WARN DFSClient: Failed to connect to /10.0.24.10:9866 for block, add to deadNodes and continue. org.apache.hadoop.net.ConnectTime 阅读全文
posted @ 2022-05-03 06:07 学而不思则罔！ 阅读(518) 评论(0) 推荐(0) 编辑
1.修改spark中显示日志等级
摘要：https://blog.csdn.net/OWBY_Phantomhive/article/details/123086181 note : 阅读全文
posted @ 2022-04-10 16:52 学而不思则罔！ 阅读(32) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示