12 2019 档案

spark window本地运行wordcount错误
摘要：在运行本地运行spark或者hadoop代码时可能会遇到一下三种问题 1.Exception in thread "main" java.lang.UnsatisfiedLinkError：org.apache.hadoop.io.native.NativeID$Windows.access0 2. 阅读全文
posted @ 2019-12-25 10:41 夏天换上冬装 阅读(444) 评论(0) 推荐(0) 编辑
spark代码写入hdfs错误
摘要：报错： org.apache.hadoop.security.AccessControlException: Permission denied: user=hgm, access=WRITE 其实就是当前window下hgm user没有hdfs的写权限 sudo -u hdfs hdfs dfs 阅读全文
posted @ 2019-12-25 10:38 夏天换上冬装 阅读(676) 评论(0) 推荐(0) 编辑