摘要: 本人的开发环境: 1.虚拟机centos 6.5 2.jdk 1.8 3.spark2.2.0 4.scala 2.11.8 5.maven 3.5.2 在开发和搭环境时必须注意版本兼容的问题,不然会出现很多莫名其妙的问题 本人的开发环境: 1.虚拟机centos 6.5 2.jdk 1.8 3.s 阅读全文
posted @ 2017-11-28 23:23 那一抹风 阅读(850) 评论(0) 推荐(0) 编辑
摘要: 转载必须注明出处:梁杰帆 在这里要先感谢原作者们!如果各位在这里发现了错误之处,请大家提出 1.Initializing Spark Spark程序必须做的第一件事就是创建一个SparkContext对象,它告诉Spark如何访问集群。要创建SparkContext,首先需要构建一个SparkCon 阅读全文
posted @ 2017-11-28 23:00 那一抹风 阅读(204) 评论(0) 推荐(0) 编辑