2016年11月24日
如何运行Spark程序
摘要： [hxsyl@CentOSMaster spark-2.0.2-bin-hadoop2.6]# ./bin/spark-submit --class org.apache.spark.examples.SparkPi --master local examples/jars/spark-exampl 阅读全文
posted @ 2016-11-24 17:27 加拿大小哥哥 阅读(699) 评论(0) 推荐(0) 编辑
Hadoop2.x Permission denied: user=dr.who, access=READ_EXECUTE inode="/tmp"
摘要： 在hadoop2中查看网页中的/tmp目录出现下面的错误： 修改权限就好了。。。。我原来一直纠结dr.who是什么鬼...不管他修改hdfs的权限就好了。 阅读全文
posted @ 2016-11-24 16:35 加拿大小哥哥 阅读(7348) 评论(2) 推荐(0) 编辑
Unable to load native-hadoop library for your platform... using builtin-Java classes where applicable
摘要： 以前hadoop也有这个问题，没注意，用spark也提示，解决一下。 首先找到对应自己hadoop版本的的lib包，编译好后，名字类似hadoop-native-64-2.4.1.tar ，放到lib下的覆盖native。 设置环境变量并生效。 还是不行。。 阅读全文
posted @ 2016-11-24 14:58 加拿大小哥哥 阅读(437) 评论(0) 推荐(0) 编辑