Cygwin运行nutch报错:Failed to set permissions of path

不羁的心 提交于 2019-11-29 09:04:07

错误信息:

Exception in thread "main" java.io.IOException:Failed to set permissions of path:\tmp\hadoop-ysc\mapred\staging\ysc-2036315919\.staging to 0700


官方BUG参考:

https://issues.apache.org/jira/browse/HADOOP-7682


解决方法:

1、下载并解压http://archive.apache.org/dist/hadoop/common/hadoop-1.1.2/hadoop-1.1.2.tar.gz

2、修改hadoop-1.1.2\src\core\org\apache\hadoop\fs\FileUtil.java,搜索 Failed to set permissions of path,找到689行,把throw new IOException改为LOG.warn 

3、修改hadoop-1.1.2\build.xml,搜索autoreconf,移除匹配的6个executable="autoreconf"的exec配置 

4、下载解压ant,将ant目录下的bin目录加入环境变量path 

5、在Cygwin命令下行切换到hadoop-1.1.2目录,执行ant 

6、用新生成的hadoop-1.1.2\build\hadoop-core-1.1.3-SNAPSHOT.jar替换nutch的hadoop-core-1.0.3.jar 

7、对于eclipse开发来说,替换C:\Users\ysc\.ivy2\cache\org.apache.hadoop\hadoop-core\jars\hadoop-core-1.1.2.jar


hadoop1.2.1.jar是修改后的JAR,可用于Nutch1.7,其他Nutch版本没测试过。

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!