2019年10月18日

spark错误集

摘要： 1、ExitCodeException exitCode=13 spark-submit 命令提交的代码中master设置的是"local[6]" ，应该设置为”yarn" ; 2、外部声明对象，而后在转换操作中搜集数据，最后再处理，这种思路的问题 最后你会发现啥也没搜集到，用于收集数据的对象是空的 阅读全文

posted @ 2019-10-18 19:23 mylittlecabin 阅读(474) 评论(0) 推荐(0) 编辑

linux实用命令

摘要： 1、查看目录下各文件夹大小 du -sh ./* 2、查看cpu信息 cat /proc/cpuinfo|more 3、查看内存信息 free -g 阅读全文

posted @ 2019-10-18 15:01 mylittlecabin 阅读(134) 评论(0) 推荐(0) 编辑

导航