Hadoop:windows 上 hadoop项目遇到的一些问题

2017-10-19 本文已影响19人李逍遥JK

hadoop报空指针异常：
将hadoop/bin下的winutils.exe和hadoop.dll文件拷贝到windows/System32文件夹下。
报错： null chomod 0644
原因是因为hadoop 的jar包和hadoop版本不一致，解决办法，下载对应的jar包或者hadoop。
hadoop hdfs nodename clusterid 和datanode clusterid 不一定，导致hadoop启动后找不到datanode：
产生原因：运行hadoop fs -format 命令导致hadoop格式化，clusterid发生了改变。
解决办法：
1.修改datanode 或者 namenode 中/dfs/data/current/VERSION 中的clusterid.
2.停止集群，将datanode中/dfs/文件夹删除（没有数据的情况下）。再开启集群。