执行stop-dfs.sh后无法停止hadoop集群【hadoop】

今天药忘吃喽~ 2022-04-17 03:51 368阅读 0赞

### 错误情况： ###

Stopping namenodes on [master]
    master: no namenode to stop
    slave1: no datanode to stop
    slave2: no datanode to stop
    slave3: no datanode to stop
    Stopping secondary namenodes

### 3. 原因分析 ###

执行stop-dfs.sh后，会依次执行hadoop-daemons.sh > hadoop-daemon.sh脚本，然后定位到“no $command to stop”
    发现脚本会在$HADOOP_PID_DIR目录里面查找hadoop-$HADOOP_IDENT_STRING-$command.pid文件，
    $HADOOP_PID_DIR目录默认是/tmp目录，$HADOOP_IDENT_STRING默认是启动Hadoop的用户名$USER，$command是
    你要停止的节点类型，例如namenode、datanode或secondarynamenode。所以本例的pid文件名是
    ：hadoop-hdfs-namenode.pid、hadoop-hdfs-secondarynamenode.pid、hadoop-hdfs-datanode.pid。

因为根据linux的tmpwatch，默认在30天内文件不被访问的情况下就会被清理，所以导致找不到上述的pid文件，
    因此无法停止namenodes、datanodes和secondary namenodes。

### 解决方法 ###

使用ps命令查找正在运行的namenodes、datanodes和secondary namenodes的pid，然后在/tmp目录创建对应的pid文件，重新执行stop-dfs.sh脚本，一切正常！或者可以直接运行kill -9命令把对应的pid进程杀掉。下次重新启动hdfs之前建议修改$HADOOP\_PID\_DIR目录，否则的话那些pid文件还是会被tmpwatch清理。

### 参考博客 ###

[博客地址1][1]

[1]: https://blog.csdn.net/gangchengzhong/article/details/69525048

发表评论取消回复

表情：

评论列表（有 0 条评论，368人围观）

还没有评论，来说两句吧...

相关阅读

相关 Hadoop篇：Hadoop集群安装

规划在搭建Hadoop集群前，我们肯定需要先规划一下集群的各个节点安装的组件。如果你是伪分布式或单机模式，则不需要遵循任何规则，可以随意安装各个组件。如果你是完全分布式

左手的ㄟ右手/ 2024年03月16日 19:11/ 0 赞/ 83 阅读

相关 Hadoop-启动集群

文章目录启动集群 1. 自定义配置集群 2. 启动集群 3. 测试 4

ゝ一世哀愁。/ 2022年11月08日 11:29/ 0 赞/ 265 阅读

相关 hadoop实践（三）hadoop 集群配置

第一步：集群规划 master 192.168.136.140 slave1 192.168.136.151 slave2 192.168.136.152

╰+攻爆jí腚メ/ 2022年08月23日 08:45/ 0 赞/ 22 阅读

相关 Hadoop集群配置

1.在进行Hadoop集群配置中，需要在/etc/hosts文件中添加集群中所有机器的IP与主机名，这样Master与所有的Slave机器之间不仅可以通过IP进行通信，还可以通

桃扇骨/ 2022年08月07日 05:35/ 0 赞/ 258 阅读

相关 (16)hadoop 集群重启与停止

Once all the necessary configuration is complete, distribute the files to the HADOOP\_CO

冷不防/ 2022年06月17日 13:43/ 0 赞/ 409 阅读

相关 Hadoop集群与Hadoop性能优化

Hadoop性能优化：Hadoop机架感知实现及配置：分布式的集群通常包含非常多的机器，由于受到机架槽位和交换机网口的限制，通常大型的分布式集群都会跨好几个机架，由多个

叁歲伎倆/ 2022年06月15日 01:36/ 0 赞/ 239 阅读

相关执行stop-dfs.sh后无法停止hadoop集群【hadoop】

错误情况： Stopping namenodes on [master] master: no namenode to stop slave1:

今天药忘吃喽~/ 2022年04月17日 03:51/ 0 赞/ 369 阅读

相关 Hadoop（二）Hadoop集群搭建

环境要求 Hadoop2.6 centos7 前提准备好三台centos系统，配置如下 <table> <thead> <tr>

深藏阁楼爱情的钟/ 2022年04月08日 13:26/ 0 赞/ 370 阅读

相关 hadoop集群设置

Hadoop Cluster Setup hadoop集群设置目的本文档描述了如何安装和配置Hadoop集群，范围从几个节点到具有数千个节点的超大集群。要

缺乏、安全感/ 2022年03月31日 06:30/ 0 赞/ 295 阅读

相关 Hadoop(二)搭建Hadoop集群

在了解Hadoo基础之后，借助于docker快速实现虚拟化，搭建Hadoop集群，进一步了解Hadoop，实地测试，实地操作，更进一步的了解Hadoop。首先需要了解Had

爱被打了一巴掌/ 2021年11月23日 10:06/ 0 赞/ 537 阅读