用于解决在本地跑spark程序时出的null/winutils.exe

时间:2021-10-16 08:17:02
【文件属性】:

文件名称:用于解决在本地跑spark程序时出的null/winutils.exe

文件大小:266KB

文件格式:ZIP

更新时间:2021-10-16 08:17:02

解决文档

spark在windows上local模式下的缺失winutils.exe异常 在写入临时文件后,执行shell命令时报错出现null command,由于没有配置hadoop在windows相关的winutils.exe命令文件,下载好该文件的后可以配置HADOOP_HOME环境变量 HADOOP_HOME=F:/hadoop-common-2.2.0-bin-master 或者在具体应用程序代码中最上方加入(我的是加入这个才有效,上面的无效) System.setProperty("hadoop.home.dir","F:/hadoop-common-2.2.0-bin-master" )


【文件预览】:
解决方案.txt
hadoop-common-2.2.0-bin-master
----bin()
--------hadoop.exp(7KB)
--------winutils.exe(40KB)
--------hadoop.pdb(331KB)
--------hadoop.lib(12KB)
--------hadoop.dll(49KB)
--------hadoop(5KB)
--------hadoop.cmd(7KB)
--------rcc(2KB)
--------winutils.pdb(363KB)
--------libwinutils.lib(200KB)

网友评论