摘要: 在spark上跑python脚本,需要指定python版本时,有如下做法: 方法一: 在环境变量文件 /etc/profile 中添加指定的pyspark,python的版本 保存后source一下 /etc/profile ,使之生效 方法二: 在spark-submit时增加参数 --conf 阅读全文
posted @ 2019-11-13 11:11 彩色条纹小斑马 阅读(3078) 评论(0) 推荐(0) 编辑
摘要: 方法一: 亲测有效!!!! 方法二: 阅读全文
posted @ 2019-11-13 10:24 彩色条纹小斑马 阅读(1881) 评论(0) 推荐(0) 编辑