随笔分类 -  Spark大数据

上一页 1 2
AnalysisErrorAt.failAnalysis(package.scala:42
摘要：StackOverFlow上说可能是存在重复Keys我遇到的情况是select了一个不存在的列,修改后没有再报错了. https://stackoverflow.com/questions/56552801/how-to-fix-org-apache-spark-sql-catalyst-analy 阅读全文
posted @ 2020-12-25 10:31 船长博客 阅读(397) 评论(0) 推荐(0) 编辑
Spark如何把NA设置为-1
摘要：masterDF = masterDF.na.fill(-1) 其它: 也可以在fill中使用Map，其中key是列名，value可以是Int, Long, Float, Double, String, Boolean. masterDF.na.fill(masterDF.columns.map(_ 阅读全文
posted @ 2020-12-21 21:17 船长博客 阅读(190) 评论(0) 推荐(0) 编辑

上一页 1 2
永远相信美好的事情即将发生！
点击右上角即可分享
微信分享提示