spark-local-运行异常-Could not locate executable null\bin\winutils.exe in the Hadoop binaries

windows下-local模式-运行spark:

spark-local-运行异常-Could not locate executable null\bin\winutils.exe in the Hadoop binaries

 

1.下载winutils的windows版本

  GitHub上,有人提供了winutils的windows的版本,项目地址是:https://github.com/srccodes/hadoop-common-2.2.0-bin,直接下载此项目的zip包,下载后是文件名是hadoop-common-2.2.0-bin-master.zip,随便解压到一个目录

2.配置环境变量

  增加用户变量HADOOP_HOME,值是下载的zip包解压的目录,然后在系统变量path里增加$HADOOP_HOME\bin 即可。  

  再次运行程序,正常执行。

 转自:https://www.cnblogs.com/xjh713/p/6538030.html

 

   
上一篇:python 实现GUI(图形用户界面)编程


下一篇:python查找重复图片并删除(图片去重) - python