spark window本地运行wordcount错误

在运行本地运行spark或者hadoop代码时可能会遇到一下三种问题

 

1.Exception in thread "main" java.lang.UnsatisfiedLinkError：org.apache.hadoop.io.native.NativeID$Windows.access0

2.java.lang.NullPointerException at java.lang.ProcessBuilder.start.

3.java.io.IOException: Could not rename file  

    

    

    解决办法是将附加里面的hadoop-common-bin-2.7.2-x64.zip/hadoop-2.7.2.tar.gz解压到任意目录。

在IDEA中配置Run Configuration，添加HADOOP_HOME变量

 

    

然后将hadoop.dll,winutils.exe添加到%HADOOP_HOME%\bin和c:/windows/System32下

 

 

hadoop.dll,winutils.exe文件

链接：https://pan.baidu.com/s/1RWYxDwN0-iH_lso9Q8jtSA
提取码：l2ej