随笔分类 -  spark

windows下 eclipse搭建spark java编译环境
摘要：环境： win10 jdk1.8 之前有在虚拟机或者集群上安装spark安装包的，解压到你想要放spark的本地目录下，比如我的目录就是D:\Hadoop\spark-1.6.0-bin-hadoop2.6 /** *注意： 之前在linux环境下安装的spark的版本是spark-2.2.0-bi 阅读全文
posted @ 2017-07-25 15:14 K_artorias 阅读(5514) 评论(2) 推荐(0) 编辑
spark1.6.0伪分布式搭建
摘要：环境： hadoop2.6.0 jdk1.8 ubuntu 14.04 64位 1 安装scala环境 版本是scala-2.10.6，官网下载地址http://www.scala-lang.org/download/ 然后配置scala的环境变量：sudo vim /etc/profile 执行命 阅读全文
posted @ 2017-07-23 22:30 K_artorias 阅读(1003) 评论(0) 推荐(0) 编辑