摘要: 在自动化中经常需要将日志文件发送到指定用户组,于是记录一下使用sendmail发送邮件及附件的shell脚本模板 阅读全文
posted @ 2019-02-27 15:49 LestatZ 阅读(1490) 评论(0) 推荐(0) 编辑
摘要: 在关于spark任务并行度的设置中,有两个参数我们会经常遇到,spark.sql.shuffle.partitions 和 spark.default.parallelism, 那么这两个参数到底有什么区别的? 首先,让我们来看下它们的定义 看起来它们的定义似乎也很相似,但在实际测试中, spark 阅读全文
posted @ 2019-02-27 10:30 LestatZ 阅读(1940) 评论(0) 推荐(1) 编辑