hadoop常见错误及解决方法

1、解决"no datanode to stop"问题
jps 中看不到namenode
删除/tmp 文件中 红色框 中的文件


节点
$rm -rf /usr/hadoop/tmp/*
$rm -rf /tmp/hadoop*

主管理
$rm -rf /usr/hadoop/tmp/*
$rm -rf /tmp/hadoop*
$hadoop namenode -format
$start-all.sh


2、节点jps没有datanode 和tasktracker 进程


查看节点日志 cat hadoop-hadoop-datanode-Slave2.Hadoop.log日志
ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.lang.IllegalArgumentException: Does not contain a valid host:port authority: file:///
        at org.apache.hadoop.net.NetUtils.createSocketAddr(NetUtils.java:164)

Master core-site.xml
   
        fs.default.name
        hdfs://192.168.19.100:9000
   

找个3天才发现，配置节点的时候遗漏的内容。

解决方式：因为需要在每个节点上配置core-site.xml文件 、 mapred-site.xml文件 、hdfs-site.xml文件、mapred-site.xml文件和conf/Master文件
，所以建议在Master机上 scp -r /usr/hadoop root@节点IP:/usr/  这样只需要修改下conf/slaves文件即可。


3、:50070/nn_browsedfscontent.jsp 无法打开
因为用的虚拟机进行测试，本机电脑无法浏览，但是在虚拟机里面可以打开。