CDH主机下线

亦凉 2022-12-23 09:45 411阅读 0赞

### 文章目录 ###

*  1，配置hdfs, hbase: 提高下线速度
 *  2，主机：进入维护模式
 *  3, 主机解除授权: Decommission(退役)
 *   *  解除授权的操作细节
     *   *  a, hbase数据转移
         *  b, hdfs 数据转移

需求: 某服务器，由于规划不完善的原因，需要回收做为别的用途, 此时如何确保hdfs,hbaes 数据不丢失  
参考： [https://docs.cloudera.com/documentation/enterprise/5-12-x/topics/cm\_mc\_decomm\_host.html][https_docs.cloudera.com_documentation_enterprise_5-12-x_topics_cm_mc_decomm_host.html]

# 1，配置hdfs, hbase: 提高下线速度 #

*  确保hdfs 主机下线后，副本数足够: 比如replica=1, 两个datanode中下线一个，还有一个dn可用，满足备份数要求
 *  确保hdfs 中的块是完整的: hdsf fsck / (没有找到损害的块 )

########## hdfs #############
    #依据迭代设置复制工作乘数器
    dfs.namenode.replication.work.multiplier.per.iteration=10 默认就行
    #DataNode 上的最大复制线程数
    dfs.namenode.replication.max-streams=20 --> 50
    #Datanode 上复制线程数的硬限制
    dfs.namenode.replication.max-streams-hard-limit=40 --> 100
    
    ########## hbase #############
    Region Mover 线程: 1 --> 5 (小于等于5)

# 2，主机：进入维护模式 #

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70_pic_center]

# 3, 主机解除授权: Decommission(退役) #

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70_pic_center 1]

## 解除授权的操作细节 ##

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70_pic_center 2]

### a, hbase数据转移 ###

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70_pic_center 3]

### b, hdfs 数据转移 ###

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70_pic_center 4]

[https_docs.cloudera.com_documentation_enterprise_5-12-x_topics_cm_mc_decomm_host.html]: https://docs.cloudera.com/documentation/enterprise/5-12-x/topics/cm_mc_decomm_host.html
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70_pic_center]: /images/20221120/a0b72349bae04ab087bd6f77cbb99e38.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70_pic_center 1]: /images/20221120/963202797bdb4be585e998f854080012.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70_pic_center 2]: /images/20221120/5d909f93a2bd482c8a5bdf1353617264.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70_pic_center 3]: /images/20221120/a632d3c1e4a644df82a60ee774c7adad.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2V5ZW9mZWFnbGU_size_16_color_FFFFFF_t_70_pic_center 4]: /images/20221120/ec994dfa76d1421abdac1e31771a0634.png