CDH环境快速恢复不同步的JournalNode

时间:2024-05-21 09:18:31

背景:

CDH集群中一个DataNode节点宕机后所有服务中断,其他节点正常运行并存储了大量新数据。

在恢复宕机节点后,重启其DataNode与JournalNode,之后CM报出JournalNode不同步的错误,如下图。

CDH环境快速恢复不同步的JournalNode

CDH环境快速恢复不同步的JournalNode

处理:

1、停止bigdata168上不同步的JournalNode服务(在CM上操作角色)

2、备份bigdata168服务器上JournalNode的数据目录

CDH环境快速恢复不同步的JournalNode

cp -r  /dfs/jn opt/backup

3、删除bigdata168服务器上JournalNode的数据目录下以edits_inprogress_开头的所有文件,注意是edits_inprogress开头的。

4、重启bigdata168服务器上的JournalNode(在CM上操作角色),之后它会自动向正常节点同步数据。

等待一段时间,该JournalNode就会恢复。