摘要：
一般情况下主机都会有默认版本的python，这不是我们需要的，可以通过python --version查看主机python默认版本： # python --version Python 2.7.5 下载需要的安装包，地址：Index of /ftp/python/ 或使用wget命令下载： # wg 阅读全文
摘要：
Spark资源参数调优，其实主要就是对Spark运行过程中各个使用资源的地方，通过调节各种参数，来优化资源使用的效率，从而提升Spark作业的执行性能。 num-executors：该参数用于设置Spark作业总共要用多少个Executor进程来执行。Driver在向YARN集群管理器申请资源时，Y 阅读全文