2018年12月14日
Pyspark spark-submit 集群提交任务以及引入虚拟环境依赖包攻略
摘要： 网上提交 scala spark 任务的攻略非常多，官方文档其实也非常详细仔细的介绍了 spark-submit 的用法。但是对于 python 的提交提及得非常少，能查阅到的资料非常少导致是有非常多的坑需要踩。 官方文档对于任务提交有这么一段介绍，但是初次使用者依然会非常疑惑： Bundling 阅读全文
posted @ 2018-12-14 19:15 piperck 阅读(19468) 评论(0) 推荐(1) 编辑