极风狼 / hadoop / 解决启动hadoop集群时用jps查看datanode已...

分享

   

解决启动hadoop集群时用jps查看datanode已经启动,但是在webui,x.x.x.x:50070上查看不到datanode的问题

2020-04-16  极风狼

用jps查看此时datanode已经启动

[root@hadoop02 name]# jps
12858 DataNode
12987 NodeManager
13196 Jps

此时进入x.x.x.x:50070查看节点情况,只有01和03启动,02没有启动,但是用jps查看02上的datanode已经启动,这是为什么呢
在这里插入图片描述
这是因为克隆完在格式化namenode之后,没有去删除主从节点上面的用于保存数据的文件夹(即dfs.name.dir配置的路径下的文件),导致内部namenode存在的关于文件系统的元信息和数据节点对应不上造成的.

解决办法:

进入到 hdfs-site.xml 中找到配置name和data的2个路径

在这里插入图片描述
分别进入到这2个目录,然后删除这2个目录下的所有文件,除了作为namenode的机器 ,其他作为datanenode的机器都要删除,下同

比如我的是/home/hadoopdata/dfs/data 和 /home/hadoopdata/dfs/name

cd /home/hadoopdata/dfs/name
rm -rf ./*
cd /home/hadoopdata/dfs/data
rm -rf ./*

进入到 vim core-site.xml 查看如图的tmp路径
在这里插入图片描述

cd /opt/app/hadoop-2.7.7/data/tmp
rm -rf ./*

hsh我的文件夹:
rm -rf /home/hadoop/dfs/name/*
rm -rf /home/hadoop/dfs/data/*
rm -rf /home/hadoop/temp/*

如果上述不行的话 在namenode节点的机器上格式化一下

hadoop namenode -format

进入后台查看一下,已经完美解决,三个节点运行正常,可以跑job啦
在这里插入图片描述

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多
    喜欢该文的人也喜欢 更多

    ×
    ×

    ¥.00

    微信或支付宝扫码支付:

    开通即同意《个图VIP服务协议》

    全部>>